Telegram Group & Telegram Channel
Дошли руки посмотреть Microsoft Ignite. Много всего сказали про интеграцию моделей в повседневную рутину - интеграция copilot с приложениями в винде выглядит невероятно. (Неужели Microsoft сразу прыгнет от самого худшего в мире приложения почты и календаря к самому лучшему и удобному?)

Больше всего мне было интересно, что компания представила новый чип, разработанный специально для LLM - Maia 100.

Процессоры, оптимизированные под задачи машинного обучения и нейронок уже существуют давно, например, гугловские TPU. Однако, тут больше удивляет, что Майкрософт выпустила чип заточенный не просто под DL задачи, а под конкретную модель. Разработать процессор - недешевое и долгое развлечение, а значит компания делает очень большие ставки на языковые модели и на ChatGPT в частности.

Интересно было бы узнать, какие именно LLM-специфичные оптимизации были сделаны. Хотя стоит отметить, что процессор называют LLM-optimized только в общей презентации, посвященной всем технологиям. В более детальной презентации о датацентрах и серверах, а также в соответствующей статье процессор называют уже AI-optimized. Так что не удивлюсь, если часть про LLM - просто маркетинг. Тем более разработка процессора занимает не один год и есть сомнения, что они бросились разрабатывать собственный процессор сразу после выхода первых статей про LLM (GPT1.0 - 2018, GPT2.0 - 2019).

Забавно наблюдать, как человечество прошло полный круг от single-purpose процессоров (ENIAC , Harvard Mark 1, IBM 1401) созданных для решения одной конкретной задачи к general-purpose процессорам, которые могут решать широкий круг задач и обратно к узкоспециализированным чипам.



group-telegram.com/misha_writes_code/142
Create:
Last Update:

Дошли руки посмотреть Microsoft Ignite. Много всего сказали про интеграцию моделей в повседневную рутину - интеграция copilot с приложениями в винде выглядит невероятно. (Неужели Microsoft сразу прыгнет от самого худшего в мире приложения почты и календаря к самому лучшему и удобному?)

Больше всего мне было интересно, что компания представила новый чип, разработанный специально для LLM - Maia 100.

Процессоры, оптимизированные под задачи машинного обучения и нейронок уже существуют давно, например, гугловские TPU. Однако, тут больше удивляет, что Майкрософт выпустила чип заточенный не просто под DL задачи, а под конкретную модель. Разработать процессор - недешевое и долгое развлечение, а значит компания делает очень большие ставки на языковые модели и на ChatGPT в частности.

Интересно было бы узнать, какие именно LLM-специфичные оптимизации были сделаны. Хотя стоит отметить, что процессор называют LLM-optimized только в общей презентации, посвященной всем технологиям. В более детальной презентации о датацентрах и серверах, а также в соответствующей статье процессор называют уже AI-optimized. Так что не удивлюсь, если часть про LLM - просто маркетинг. Тем более разработка процессора занимает не один год и есть сомнения, что они бросились разрабатывать собственный процессор сразу после выхода первых статей про LLM (GPT1.0 - 2018, GPT2.0 - 2019).

Забавно наблюдать, как человечество прошло полный круг от single-purpose процессоров (ENIAC , Harvard Mark 1, IBM 1401) созданных для решения одной конкретной задачи к general-purpose процессорам, которые могут решать широкий круг задач и обратно к узкоспециализированным чипам.

BY Миша пишет код




Share with your friend now:
group-telegram.com/misha_writes_code/142

View MORE
Open in Telegram


Telegram | DID YOU KNOW?

Date: |

In the United States, Telegram's lower public profile has helped it mostly avoid high level scrutiny from Congress, but it has not gone unnoticed. Anastasia Vlasova/Getty Images Continuing its crackdown against entities allegedly involved in a front-running scam using messaging app Telegram, Sebi on Thursday carried out search and seizure operations at the premises of eight entities in multiple locations across the country. The company maintains that it cannot act against individual or group chats, which are “private amongst their participants,” but it will respond to requests in relation to sticker sets, channels and bots which are publicly available. During the invasion of Ukraine, Pavel Durov has wrestled with this issue a lot more prominently than he has before. Channels like Donbass Insider and Bellum Acta, as reported by Foreign Policy, started pumping out pro-Russian propaganda as the invasion began. So much so that the Ukrainian National Security and Defense Council issued a statement labeling which accounts are Russian-backed. Ukrainian officials, in potential violation of the Geneva Convention, have shared imagery of dead and captured Russian soldiers on the platform. The account, "War on Fakes," was created on February 24, the same day Russian President Vladimir Putin announced a "special military operation" and troops began invading Ukraine. The page is rife with disinformation, according to The Atlantic Council's Digital Forensic Research Lab, which studies digital extremism and published a report examining the channel.
from us


Telegram Миша пишет код
FROM American