❗️Открытие Apple: оказывается у LLM есть особые "супер-веса", которые критически важны для работы всей модели

Исследователи также обнаружили, что эти "супер-веса" создают "супер-активации" - особо сильные сигналы, которые распространяются по всей сети модели.

Исследование проведено командой из Apple и Университета Нотр-Дам.

Представьте себе изменение всего одного параметра из миллиардов может полностью "сломать" работу всей модели.

Что это значит?

В моделях типа LLaMA-7B есть критически важные параметры.
Удаление такого параметра снижает точность модели до уровня случайного угадывания. При этом удаление даже 7000 других крупных весов влияет на качество работы минимально.

Это важно тем, что:

1. Меняет наше понимание работы нейросетей.
2. Открывает новые возможности для оптимизации моделей.
3. Позволяет эффективнее сжимать модели без потери качества.

GitHub.

❗️Глава Scale AI: мы вступили в фазу развития, где прорывы в рассуждениях и других областях приведут к появлению сверхинтеллекта в течение 6 лет или раньше.

Текущая фаза, по его мнению, будет характеризоваться не просто увеличением размера моделей, а качественными прорывами в способности ИИ к рассуждениям и другим продвинутым когнитивным функциям.

В дополнение к этому Alibaba выпустила мощную модель, которая умеет рассуждать, качество рассуждений на уровне O1 и Deepseek R1.

QwQ 32B в 12 раз меньше параметров, чем у Llama 405B, но рассуждает эффективнее https://www.group-telegram.com/alwebbci/2799

Все, закон о налогообложении операций с криптовалютой подписан. Что и как теперь будет?

Закон начнет действовать с 1 января 2025 года.

🔹 Налоги на майнинг:

• Для физлиц - НДФЛ 13% (если общий доход за год до 5 млн руб) или 15% (с суммы превышения 5 млн руб)

• Для ИП и организаций на общей системе - налог на прибыль 20%

• Для ИП на УСН:
- 6% с доходов
- или 15% с разницы между доходами и расходами

🔹 Что можно включить в расходы при майнинге:

• Стоимость оборудования
• Затраты на электроэнергию
• Аренду помещений
• Оплату услуг майнинговых пулов
• Обслуживание и ремонт оборудования
Все расходы должны быть документально подтверждены.

🔹 Отчетность для майнеров:

• Операторы майнинговой инфраструктуры обязаны подавать отчеты до 25 числа месяца после квартала.

• Штраф за непредоставление - ₽40 000.

🔹 Правила определения стоимости криптовалюты:

• При продаже: минимальная цена = рыночная котировка - 20%
• При покупке: максимальная цена = рыночная котировка + 20%
• Рыночная цена берется с иностранных бирж с оборотом более 100 млрд рублей в день
• Цены в иностранной валюте пересчитываются по курсу ЦБ РФ на дату операции

🔹 Специальные режимы:

• УСН доступна при годовом доходе до 200 млн руб и штате до 130 человек
• Самозанятые могут заниматься майнингом с налогом:
- 4% при работе с физлицами
- 6% при работе с ИП и организациями
• Годовой лимит дохода для самозанятых - 2,4 млн руб

🔹 Учет убытков:

• Убытки можно переносить на будущие периоды в течение 10 лет
• В каждый последующий год можно списать не более 50% от текущей налоговой базы
• Убытки учитываются отдельно от других видов деятельности.

❗️От цифровой копии мозга до искусственной эмпатии:Foresight Institute запускает программу по созданию AGI через эмуляцию мозга

Инициатива стоимостью $20 млрд объединила более 60 ведущих исследователей из Гарварда, Стэнфорда и других институтов.

Программа предлагает 4 параллельных пути развития технологий, которые могли бы обеспечить создание безопасного ИИ, сохраняющего человеческие ценности.

Наиболее амбициозное направление программы — создание точной цифровой копии человеческого мозга (Hi-fi WBE). Этот проект, оцениваемый в $2-4 млрд, возглавляют исследователи из Гарвардского университета и Фонда Саймонса. Они планируют детально картировать структуру мозга на уровне отдельных нейронов, используя передовые технологии микроскопии.

Параллельно развивается более практичный подход (Lo-fi WBE), нацеленный на воспроизведение функций мозга без точного копирования его структуры. Команда из NYU и Mila оценивает затраты на эту работу в $20 млн для мозга мыши и до $2 млрд для человеческого мозга.

Отдельное направление с бюджетом более $1 млрд сфокусировано на разработке нейроинтерфейсов (BCI). "Прямое соединение мозга с компьютером может стать ключом к безопасному развитию ИИ", — считает Э.Дж. Чичильниски из Stanford Medicine.

Самый экономичный, но не менее важный проект ($1 млн) исследует возможности внедрения человеческих ценностей и социального поведения в системы ИИ. Его ведут специалисты из Оксфордского университета и OpenAI.

Для поддержки этих направлений Foresight Institute запустил программу грантов на $20 млн и учредил приз в $1 млн за успешную Lo-fi эмуляцию мозга мыши.

По оценкам экспертов, первые значимые результаты можно ожидать через 3-4 года в области Lo-fi эмуляции и просоциального ИИ. Более сложные проекты потребуют 7-10 лет работы.

⚡️Представлен 1-й в мире децентрализованный ИИ INTELLECT-1 https://www.group-telegram.com/alwebbci/2801

Команда Prime Intellect совершила настоящий прорыв в разработке ИИ, создав первую в мире языковую модель с 10 млрд параметров, обученную децентрализованно в глобальном масштабе:

• 30 независимых поставщиков вычислительных ресурсов
• 5 стран, 3 континента(США, Индия, Финляндия, Швеция, Сингапур)
• До 112 NVIDIA H100 GPU одновременно
• 1 триллион токенов в обучающей выборке
• 42 дня обучения

Главное достижение - доказана возможность обучения крупных языковых моделей силами распределенного сообщества, а не только крупных корпораций.

Эффективность впечатляет:
• 96% в США
• 85.6% при трансатлантическом обучении
• 83% при глобальном распределении

Фреймворк PRIME снизил требования к пропускной способности сети в 400 раз по сравнению с традиционными методами.

Это важный шаг к демократизации ИИ. Теперь путь к созданию продвинутых моделей открыт не только для технологических гигантов, но и для распределенных команд энтузиастов по всему миру.

Итоги уходящей недели в России и мире, что имеет значение

Прорыв недели: исследователи смогли создать естественный диалог между мозгом и протезом.

1. Apple сделали важно открытие в сфере LLM.

2. РФ признала крипту имуществом, усилив контроль за транзакциями с помощью 19 банков. А также тут ряд подробностей.

3. Тренды 2025 года уже объявили аналитики CB Insights.

4. Google представили 1-й в мире концепт стратегии ИИ в науке для государства.

5. Трагикомедия в интерпретации нашего канала, о том, что произошло с курсом ₽, биткоина и решении ЦБ. Читайте здесь.

6. Маск подтвердил прогноз нашего канала, объявив, что xAI займется играми.

7. Газпромбанк представил новый подход к инвестициям в технологии.

8. Каков путь достижения AGI у самой прорывной китайской компании DeepSeek, читайте здесь.

9. У Казахстана новая стратегия по крипте, все подробности здесь.

10. Саудовская Аравия создает свою международную коалицию по космосу.

11. NVIDIA создала ИИ-модель для работы со звуком, это своего рода «фотошоп для звука».

12. Claude теперь может реально помогать выполнять за вас задачи. Все подробности тут.
Также Claude можно подключить к интернету.

13. Neuralink соединяет мозг человека с роботизированной рукой.

14. Выходцы из Google Brain оцифровали нос и показали первый бизнес-кейс.

15. Разбор российского рынка LLM.

16. 1-й в мире кейс, когда ИИ-агент самостоятельно создал юрлицо.

17. Китайцы впервые признались, что скопировали модель O1 от OpenAI и жалеют теперь, почему? Тут ответ.

18. Ex-сотрудники Google создают облачную ОС для ИИ -агентов.

19. Трамп разворачивает США в сторону криптовалют.

20. Mayo Clinic создали ИИ, анализирующий мозговую активность во время хирургической операции.

21. Минпромторг и бизнес не готовы к переходу на цифровой рубль.

22. Стейблкоины займут 10% в мировых финансовых транзакциях - отчет Standard Chartered.

23. McKinsey: ИИ - агенты следующий важный этап развития ИИ.

24. Meta(запрещенная в РФ) создала ИИ-модель, позволяющая роботам ощущать прикосновения.

25. Разбор рынка AI Copilots тут.

26. Foresight Institute запускает программу по созданию AGI через эмуляцию мозга.

27. Представлен 1-й в мире децентрализованный ИИ INTELLECT-1.

28. Новый набор ИИ-моделей Sota Tülu 3.

29. Эндрю Нг выпустил новый пакет Python с открытым исходным кодом, чтобы упростить разработчикам использование LLM от разных провайдеров.

30. Отличный обзор о подходах к созданию ИИ-агентов, которые умеют взаимодействовать с графическим пользовательским интерфейсом и области их применения.

31. Вышла BrainLM - 1-я модель для анализа функциональной МРТ (фМРТ) головного мозга.

32. Текст недели - открытое письмо Баффета.

В РФ выросли инвестиции в оборудование для ИИ +40% в 2024г.

Это данные консорциума АНО "Вычислительная техника". Причем доля таких инвестиций достигла 14.2% от всех вложений в разработку электроники.

Вот основные цифры:

- Инвестиции в оборудование для ИИ выросли на 40% в 2024 году

- Госзакупки ИИ-оборудования достигли ₽1.7 млрд за три квартала 2024

- Средняя стоимость разработки одного нового сервера с ИИ (включая весь процесс: проектирование, постановку на производство, подготовку документации)— ₽100 млн.

- Рост производства ИИ-электроники: +10.5% с начала 2024
- Розничная цена 1 готового сервера для конечного покупателя - от ₽1.5 млн
- Прогноз доли выручки от ИИ-техники через 3 года: 23.7%

Компания Kraftway планирует начать производство СХД для нейросетей в 2025. Ожидает значительный рост спроса с 2025 года.

Fplus увеличил инвестиции в разработку на 40%;разработал 4 модели ИИ-серверов; отрудничает с НТЦ "Модуль" по нейроускорителям.

НТЦ "Модуль"фиксирует "многократный" рост спроса в 2024; планирует расширение производства в 2025; развивает линейку от портативных до серверных решений.

Эксперты ожидают, что в течение трех лет доля выручки от ИИ-оборудования может достичь почти четверти общей выручки производителей электроники. Ключевым фактором роста станет более высокая стоимость ИИ-решений: они в 5-10 раз дороже стандартных серверов.

Карта Web3 и ИИ проектов

Мы наблюдаем, как Web3 и ИИ объединяются, формируя новый "супер цикл" развития технологий.

ИИ становится мозгом системы, отвечая за принятие решений и автоматизацию, а Web3 формирует экономическую основу, обеспечивая децентрализованный обмен ценностями.

Главные тренды 2024 года

1. Эра ИИ - агентов:

- они торгуют между собой, управляют активами и даже запускают собственные проекты

- появились платформы, где каждый может создать персонального ИИ-агента за считанные минуты

2. Пять уровней новой экономики

- Вычисления: Децентрализованные сети предоставляют мощности для работы ИИ
- Данные: Прозрачные системы сбора и проверки информации
- Модели: Создание и обучение ИИ на блокчейне
- Интерфейсы: Инструменты для взаимодействия с системой
- Приложения: Конечные продукты для пользователей.

3. Практическое применение

1. Финансы: ИИ управляет инвестициями и анализирует риски
2. Игры: персонажи с собственной личностью
3. Творчество: ИИ создает музыку и искусство в метавселенной
4. Социальные сети: новый уровень взаимодействия с помощью ИИ.

Сейчас идеальное время для ИИ-стартапов в Казахстане

Страна становится новым технологическим хабом Центральной Азии. Экспорт IT-услуг уже достиг $529 млн и уверенно идет к $1 млрд к 2026 году. Казахстанские решения используются в 86 странах — от Центральной Азии до Африки.

Industrial AI Accelerator 2024-2025 открывает доступ к этому растущему рынку.

Мы видели много рынков и возможностей, но редко встречается такое уникальное сочетание факторов: государственная поддержка на высшем уровне, доступ к реальным корпоративным заказчикам, и главное — возможность стать лидерами ИИ-трансформации в ключевых секторах экономики.

Это входной билет в экосистему, где ваши решения могут масштабироваться на всю страну и мир:

1. Не нужно тратить месяцы на поиск первых клиентов — программа дает прямой доступ к крупным корпоративным и государственным заказчикам.

2. Международные эксперты и трекеры помогут адаптировать ваше решение под специфику рынка.

3. Успешные пилоты получат возможность развернуть свои решения по всей стране уже в 2025 году.

Если у вас есть ИИ-решение, которое может трансформировать промышленность, энергетику, финансы или здравоохранение — самое время действовать.

5 пилотных проектов до конца 2024 года и 20 до февраля 2025 года получат возможность стать частью технологического прорыва Казахстана.

Intel уволила своего СЕО и назначила Со-СЕО финдиректора и директора по продуктам Intel.

На этой новости акции Intel выросли на 5%.

❗️1-й страной в мире, где роботы заменили 10% рабочей силы стала Южная Корея

Это произошло по нескольким причинам:

1. Сокращение трудоспособного населения.

2. Низкий уровень рождаемости.

3. Стремление поддержать экономический рост через автоматизацию.

Сейчас в Южной Корее на каждые 10,000 работников приходится 1,102 робота - самый высокий показатель в мире(!).

Это вдвое больше роботов на производствах, чем в любой другой стране. Плотность роботов растет на 5% ежегодно с 2018 года.

Основные отрасли применения: электроника и автомобильная промышленность.

Роботы также используются в больницах и ресторанах.

Правительство инвестирует $2.4 млрд в робототехнику до конца десятилетия. Цель - увеличить локальное производство ключевых компонентов роботов с 44% до 80% к 2030 году

Мировая статистика:

1. Китай:
- Крупнейший рынок роботов
- 276,288 роботов установлено в 2023 году
- 51% всех мировых установок.

2. Япония:
- Второй по величине рынок
- 46,106 роботов установлено в 2023 году.

3. Индия:
- Быстрорастущий рынок
- 8,510 роботов установлено в 2023 году
- Рост на 59% по сравнению с предыдущим годом.

4. Сингапур:
- 770 роботов на 10,000 работников
- Второе место после Южной Кореи по плотности роботизации.

Общемировая тенденция:
- За последние 7 лет средняя плотность роботов выросла более чем вдвое
- Увеличение с 74 до 162 единиц на 10,000 работников

Крестная мама ИИ раздает миру революцию 3D-миров прямо в браузере !

Стартап World Labs, который уже получил $1млрд инвестиций представил ИИ-систему, которая превращает обычные изображения в полноценные 3D-миры прямо в вашем браузере.

Никаких сложных программ и установок – просто загружаете картинку и получаете исследуемый трехмерный мир.

Waiting list тут.

РФ на 3-м месте по запускам спутников в космос, SpaceX доминируют на рынке

Это данные свежего отчета по космическим запускам за 3-й квартал 2024.

SpaceX продолжает устанавливать рекорды: 27 успешных запусков за квартал, которыми они вывели 518 космических аппаратов общей массой 362,087 кг. Это 87% всей массы, запущенной в космос за этот период.

Китайский CASC на втором месте с 30,350 кг (около 6.3% от общей массы).

В целом картина по странам за 3-й квартал выглядит так:
- США: 32 запуска
- Китай: 16 запусков
- Россия: 3 запуска
- Япония и Европа: по 2 запуска
- Индия и Иран: по 1 запуску

Интересно, что 96% всех запущенных аппаратов — это малые спутники массой менее 1,200 кг, но при этом они составляют только 79% от общей массы запусков.

67% всех запущенных аппаратов — коммуникационные спутники (в основном Starlink), 24% — спутники дистанционного зондирования Земли.

По типам операторов:
- 75% спутников управляются коммерческими компаниями
- 14% — гражданскими госструктурами
- 11% — структурами национальной безопасности

Итоги 3-го квартала ярко показывают, как сильно изменился космический рынок за последние годы: доминирование частного сектора, массовое производство малых спутников и растущий разрыв между SpaceX и остальными игроками.

Ректор Иннополиса предложил создать центр матанализа образования, а глава направления Курчатовского института - единую систему генетических данных

Эти предложения были озвучены на встрече с президентом РФ и получили поддержку.

Центр математического анализа образования

Ректор Иннополиса Александр Гасников рассказал о серьезном расхождении между официальной статистикой и реальностью в образовании. При личном общении с учителями из разных регионов выясняется, что ситуация с кадрами, особенно по точным наукам, гораздо хуже, чем отражено в отчетах.

Для решения этой проблемы предложено создать аналитический центр (предположительно на базе "Сириуса" при участии "Иннополиса"), который объединит усилия математиков и Академии наук. Центр будет создавать точные прогностические модели потребности в учителях, анализировать демографические тренды и оценивать реальный спрос на специалистов.

Единая база генетической информации

Курчатовский институт работает над созданием централизованной базы генетических данных, которая объединит информацию о всех биоресурсах страны. Максим Патрушев заявил о проблеме - разные организации создают свои отдельные базы.
Он попросил у президента политической помощи, чтобы единой базой занимался только Курчатовский институт.

Также Максим Патрушев предложил создать единый публикационный сервис для российских ученых с возможностью машинного анализа научной информации.

Nebius Аркадия Воложа привлекла $700 млн от Accel, NVIDIA на развитие ИИ-инфраструктуры в США

Nebius (бывший международный бизнес Яндекса) объявил о привлечении $700 млн инвестиций от группы инвесторов, включая Accel, NVIDIA под управлением Orbis Investments.

Деньги пойдут на строительство в США инфраструктуры для ИИ, включая GPU-кластеры, облачные платформы и инструменты для разработчиков

К концу 2025 года компания рассчитывает выйти на годовую выручку $750 млн - $1 млрд.

Solana представила концепт децентрализованной инфраструктуры для ИИ

Solana Foundation представила свое видение будущего, по сути, перенести принципы криптовалют (децентрализация, открытость, независимость) в сферу ИИ, который сейчас находится под контролем нескольких крупных компаний и государств.

Solana хочет стать той технологической платформой, на которой будет построена эта новая децентрализованная ИИ-экономика:

Экономика ИИ-агентов
Truth Terminal показал нам, как ИИ-агенты могут взаимодействовать с блокчейном. Появляются проекты вроде HoloworldAI, где ИИ не просто существует в сети, а активно участвует в экономических процессах. Представьте себе мир, где ИИ-агенты управляют инвестиционными портфелями, создают и продают цифровые активы, и даже проводят научные исследования, используя криптовалюту для финансирования своей деятельности.

Solana делает серьёзную ставку на улучшение инструментов разработки с помощью ИИ. Цель - сделать создание блокчейн-приложений в 2-10 раз эффективнее. Для этого разрабатываются специальные бенчмарки, которые помогут оценить способности ИИ в понимании и написании кода для Solana. Представьте себе, даже начинающие разработчики смогут создавать сложные смарт-контракты с помощью продвинутых ИИ-ассистентов.

Особенно важный аспект - создание открытой, децентрализованной инфраструктуры для ИИ. Проекты вроде Kuzco, Render и Ionet уже предоставляют вычислительные мощности, а Grass и Synesis One занимаются сбором данных. Это противовес централизованным решениям, особенно государственным системам ИИ, которые могут использоваться для контроля.

Solana стремится стать домом для новой волны инноваций:
- Создание систем верификации для ИИ-взаимодействий
- Разработка инфраструктуры для лицензирования контента
- Развитие децентрализованного обучения ИИ
- Внедрение микроплатежей для ИИ-сервисов.

❗️Мировой объем рынка полупроводников в 2025 составит $697 млрд - World Semiconductor Trade Statistics

WSTS представила свой последний прогноз развития глобального рынка полупроводников, который выглядит весьма оптимистичным.

По итогу 2024 года:

- Ожидается значительный рост рынка на 19% по сравнению с предыдущим годом
- Общий объем рынка должен достичь $627 млрд
- Основными драйверами роста станут два сегмента интегральных схем:
1. Память - рост на 81%
2. Логические схемы - рост на 16.9%. При этом другие категории (дискретные компоненты, оптоэлектроника, сенсоры и аналоговые полупроводники) покажут снижение.

По странам картина следующая:

- Америка: рост на 38.9%
- Азиатско-Тихоокеанский регион: рост на 17.5%
- Япония: небольшой рост на 1.4%
- Европа: ожидается спад на 6.7%

Прогноз на 2025 год:
- Общий рост рынка на 11.2%
- Ожидаемый объем рынка - 697 миллиардов долларов
- Сегменты Logic и Memory останутся основными драйверами роста:
- Logic: рост более 17%
- Memory: рост около 13%. Эти два сегмента вместе превысят отметку в $400 млрд.

Остальные категории покажут более скромный рост в пределах однозначных чисел. Все регионы продемонстрируют рост, при этом Америка и Азиатско-Тихоокеанский регион сохранят двузначные темпы роста.

В нашем мире мало проактивных людей, но теперь есть ИИ-агенты проактивные

Исследователи из университета Цинхуа и школы ИИ Гаолин при участии Huawei и OpenBMB разработали подход для создания проактивных ИИ-агентов, которые могут:

- Предугадывать потребности пользователя
- Самостоятельно инициировать задачи без прямых указаний
- Предлагать помощь на основе наблюдения за действиями пользователя.

Их модель достигла F1-Score 66.47% в определении, когда нужно предложить помощь. Это лучше, чем существующие открытые и закрытые модели. Система может эффективно определять, когда уместно предложить помощь.

❗️При $ поддержке экс-CEO Google карта человеческого мозга будет готова через 5-10 лет https://www.group-telegram.com/alwebbci/2812

Организации, финансируемые за счет 💵 Эрика Шмидта, экс-СЕО Google, стартап E11 Bio и Future House представили новый метод картирования нейронных связей PRISM, который может радикально изменить наше понимание работы мозга.

Основное достижение - снижение стоимости процесса в 100 раз за счет инновационной технологии "самоаннотирования" нейронов.

В чем особенность PRISM?

1. Вместо дорогой электронной микроскопии используется оптическая.

2. Нейроны маркируют сами себя с помощью специальных белковых "штрих-кодов".

3. ИИ-модели используют эту маркировку для автоматического отслеживания связей.

4. Ручная проверка данных (на которую сейчас уходит 95% затрат) практически не требуется.

E11 Bio и Future House прогнозируют, что через 5 лет станет возможным полное картирование мозга мыши, а в перспективе 5-10 лет - даже человеческого мозга.

Это открывает огромные возможности для:
• Лечения неврологических заболеваний
• Создания более совершенного ИИ
• Углубления понимания работы мозга

Для сравнения: недавнее картирование мозга мухи (140 000 нейронов) заняло 10 лет. Мозг мыши содержит 70 миллионов нейронов, а человека - 100 миллиардов. PRISM может сделать эту колоссальную задачу выполнимой.

Проект начался 9 лет назад в MIT и превратился в некоммерческую исследовательскую организацию при поддержке Эрика Шмидта и других инвесторов. E11 Bio планирует опубликовать первые результаты в 2025 году и активно ищет партнеров для масштабирования технологии.

Казахстан планирует работу с Францией по ИИ и большим данным, об этом говорили главы двух стран сегодня.

А ранее стало известно, что Казахстан создает совместные исследовательские проекты с Synchrotron Soleil в области ИИ и анализа больших данных.

Также есть сотрудничество с французской Thales в сфере квантовых вычислений, ИИ и защиты критической инфраструктуры.

Договоренность есть и об обмене опытом в области GovTech с французским Государственным секретариатом по ИИ.