Digital Ниндзя

Kandinsky от Сбер AI мог быть лидером среди open source моделей для генерации изображений

Готовлю материал про работу в Сбере. Углубляясь в тему, понимаю: команда AI Сбера многого добилась. Kandinsky была одной из первых нейросетей в мире, которой мог воспользоваться рядовой юзер через веб-интерфейс. Они зарелизили его в ноябре, 2021, за полгода до Midjourney. Изображения, которые генерила модель Kandinsky были чуть наивны, технология была ещё сыровата. Первые версии моделей генерировали абстрактные изображения, поэтому Сбер выбрал нейминг в честь русских художников-абстракционистов.

Самое удивительное для меня, что Сбер в конце 21 года достигнул предварительных договорённостей о сотруднчестве со Stability AI. Stability AI сделали Stable Diffusion, лучшую open source модель для генерации изображений. Команды планировали совместно собирать датасеты и публиковать статьи. Когда началась война, сотрудничество прекратилось.

Какие позиции у Kandinsky сейчас? Нужно углубиться в то, как сравнивают модели. Сама работающая методология, как для текстовых, так и для txt2img моделей, такая: берётся один промпт, скармливается двум моделям. Человек оценивает, у какой модели генерация лучше. В результате множества сравнений каждая модель получает elo rating. Elo rating используется много, где: шахматы, го, даже dota 2.

В рейтинге оупенсорсных моделей для генерации картинок модель от Stability AI, SDXL, — лидер. Из 31 модели в рейтинге — 19 моделей это либо дообученная SDXL, либо другие модели от Stability AI. Kandinsky занимает в рейтинге 22 место. Сберовская модель отстаёт от лидера на 150 эло рейтинга, то есть она проигрывает ~75% сравнений. Это объективно хороший результат. Но могли бы быть лидерами, и из-за этого жаль.

Большой постскриптум.

Пост — прогревочный к моему расследованию про работу в Сбере. Я пока не знаю, что это будет: твиттер-тред, статья или видео, но точно что-то выпущу. Каждый факт я стараюсь подтвердить из двух независимых источников. Хочется быть точным и объективным. Там где были достижения, подстветить их, потому что в Сбере работали и до сих пор работают талантливейшие инженеры. Там где был обсёр, указать на него.

У Сбер AI есть платформа «Геометрия». Они анализируют данные со спутников и заявляют, что решают широкий спектр задач, цитата: «от климатического мониторинга и прогнозирования урожая до проверки свободных мест на парковках».

У меня есть информация от одного из источников, что у некоторых людей в команде «Геометрии» оформлена вторая форма допуска к государственной тайне. То есть, к сведениям под грифом «Совершенно секретно». Источник утверждает, что «Геометрию» используют для отслеживания перемещения войсковых соединений в Украине. Это противоречит другим моим источникам, которые рассказывают, что Греф максимально дистанцируется от войны. Спецслужбистам и воякам, которые постоянно приходят и просят у Сбера технической помощи, он обычно отвечает что-то типа: «Мы делаем банк, а в этом не разбираемся».

Если у вас есть любые сведения про сервис «Геометрия» и о том, чем там занимаются, напишите, пожалуйста, мне. Также, если вы работали в Сбере и хотите рассказать что-то, что считаете важным, пишите. Контакт в описании канала. Анонимность гарантирую.

А ещё, хочу обратиться к пресс-службе Сбера. Я, с удовольствием, готов дать высказаться другой стороне. Знаю, что вы точно мониторите все упоминания. Приходите, я настроен крайне дружелюбно.

www.group-telegram.com/ye/digital_ninjaa.com/165

27.6K viewsAug 4, 2024 at 08:10

Kandinsky от Сбер AI мог быть лидером среди open source моделей для генерации изображений

Готовлю материал про работу в Сбере. Углубляясь в тему, понимаю: команда AI Сбера многого добилась. Kandinsky была одной из первых нейросетей в мире, которой мог воспользоваться рядовой юзер через веб-интерфейс. Они зарелизили его в ноябре, 2021, за полгода до Midjourney. Изображения, которые генерила модель Kandinsky были чуть наивны, технология была ещё сыровата. Первые версии моделей генерировали абстрактные изображения, поэтому Сбер выбрал нейминг в честь русских художников-абстракционистов.

Самое удивительное для меня, что Сбер в конце 21 года достигнул предварительных договорённостей о сотруднчестве со Stability AI. Stability AI сделали Stable Diffusion, лучшую open source модель для генерации изображений. Команды планировали совместно собирать датасеты и публиковать статьи. Когда началась война, сотрудничество прекратилось.

Какие позиции у Kandinsky сейчас? Нужно углубиться в то, как сравнивают модели. Сама работающая методология, как для текстовых, так и для txt2img моделей, такая: берётся один промпт, скармливается двум моделям. Человек оценивает, у какой модели генерация лучше. В результате множества сравнений каждая модель получает elo rating. Elo rating используется много, где: шахматы, го, даже dota 2.

В рейтинге оупенсорсных моделей для генерации картинок модель от Stability AI, SDXL, — лидер. Из 31 модели в рейтинге — 19 моделей это либо дообученная SDXL, либо другие модели от Stability AI. Kandinsky занимает в рейтинге 22 место. Сберовская модель отстаёт от лидера на 150 эло рейтинга, то есть она проигрывает ~75% сравнений. Это объективно хороший результат. Но могли бы быть лидерами, и из-за этого жаль.

Большой постскриптум.

Пост — прогревочный к моему расследованию про работу в Сбере. Я пока не знаю, что это будет: твиттер-тред, статья или видео, но точно что-то выпущу. Каждый факт я стараюсь подтвердить из двух независимых источников. Хочется быть точным и объективным. Там где были достижения, подстветить их, потому что в Сбере работали и до сих пор работают талантливейшие инженеры. Там где был обсёр, указать на него.

У Сбер AI есть платформа «Геометрия». Они анализируют данные со спутников и заявляют, что решают широкий спектр задач, цитата: «от климатического мониторинга и прогнозирования урожая до проверки свободных мест на парковках».

У меня есть информация от одного из источников, что у некоторых людей в команде «Геометрии» оформлена вторая форма допуска к государственной тайне. То есть, к сведениям под грифом «Совершенно секретно». Источник утверждает, что «Геометрию» используют для отслеживания перемещения войсковых соединений в Украине. Это противоречит другим моим источникам, которые рассказывают, что Греф максимально дистанцируется от войны. Спецслужбистам и воякам, которые постоянно приходят и просят у Сбера технической помощи, он обычно отвечает что-то типа: «Мы делаем банк, а в этом не разбираемся».

Если у вас есть любые сведения про сервис «Геометрия» и о том, чем там занимаются, напишите, пожалуйста, мне. Также, если вы работали в Сбере и хотите рассказать что-то, что считаете важным, пишите. Контакт в описании канала. Анонимность гарантирую.

А ещё, хочу обратиться к пресс-службе Сбера. Я, с удовольствием, готов дать высказаться другой стороне. Знаю, что вы точно мониторите все упоминания. Приходите, я настроен крайне дружелюбно.

BY Digital Ниндзя