По ощущениям в твиттере, победил не Трамп, а Маск. Это больше выборы между акселерационистами и бюрократами, нежели чем между правыми-левыми/верхними-нижними.

Что бы там не делал лично Трамп, эти выборы скорее знак того, что люди восторженны будущим, хотят изменений и прогресса. По крайней мере, в техно-бабле.

Обратите внимание на эти цифры (или спросите вашего чатбота рассказать поподробнее). TL;DR в том, что это очень внушительный рост от базы в десятки миллиардов долларов, который в первую степень произошел из-за роста использования ИИ бизнес-клиентами и новыми физическими вычислительными мощностями.

Я не то, чтобы сильно следил за гиперскейлерами, но, кажется, очень многие недооценивают то, что происходит в индустрии.

Интересно про цифровое сознание. Мы туда движемся с двух концов:

Со стороны ML, постепенно создавая все более хорошо генерализирующие ИИ-модели. Которые, по еще неизвестным нам законам природы, в итоге приобретут сознание для успешного решения задач AGI/ASI.

Со стороны нейронаук через оцифровку работы мозга. Мозг мухи уже отсканировали, а значит в теории можно симулировать химические процессы для воспроизводства его работы. А затем масштабировать до человеческого сознания.

Пока не очень понятно какой из путей будет быстрее, но у меня есть сильное ощущение, что они оба ведут к одному и тому же.

Контент, созданный человеком (видео, музыка, тексты), станет таким же редким и нишевым явлением, как сделанная вручную мебель сегодня — его будут ценить за уникальность, несовершенства и историю создателя.

Всё остальное будет создано искусственным интеллектом.

Сцена из фильма где Уилл Смит спрашивает робота может ли тот рисовать картины и сочинять музыку :)

Буду по мере возможностей писать про новости с Devcon — главной конференции года про Эфир и блокчейн. К сожалению, у меня не будет возможности провести много времени (а, возможно, и просто зайти) на основной конференции, потому что каждый день здесь маса AI/ML/deAI эвентов, на многих из которых у меня доклады. Но про DeAI вы и так знаете, а вот в эфире много всего очень крутого происходит.

Один из главных трендов в снижении сложности запуска L2 и упрощении UX (account abstraction, chain abstraction) до такой степени, что пользователю больше не нужно задумываться о том какой блокчейн он использует, в чем нужно платить газ и как перевести между ними токены. Это делает Appchain идею возможной — у каждого успешного приложения теперь есть свой чейн. ZERO, Unichain, а сегодня вот еще ENS анонсировали Namechain.

Интересные времена впереди. Это приведет к большей гибкости приложений, удобству для непрошаренных юзеров, которые в крипте не из-за идеологии, гиковатости или жадности, а просто потому что им нужно решить понятные и просты проблемы: купить домен, перевести деньги, сделать депозит, платить зарплату, привлечь финансирование, сделать донат и т.д.

Удивительный ужин. Познакомился с:

1. Фаундером проекта, в который перешла команда, которая сделала скан мозга мухи. Теперь работают над мышью. Будем изучать и подумаем как работать вместе.

2. Квантовым биологом, который делает эксперимент по подтверждению или опровержению квантовой или пост-квантовой (по Пенроузу) модели сознания.

Вот тебе и поездка на крипто-конференцию.

#неДубай

Горячая дискуссия в интернетах: стена или нет стены.

Поясню. Намедни Илья заявил, что закон масштабирования в LLM уперся в стену. Амодей и Альтман отрицают и говорят что прогресс в способностях нейронок движется как и раньше, а может даже и шустрее.

Законы масштабирования придумали дата сатанисты, чтобы описать почему парадоксальным образом добавление
1) данных
2) компьюта
3) параметров в модели
при претрейне больших трансформеров вдруг очень линейно и предсказуемо увеличивает качество самих моделей. С 2019 года этот закон работал как часы и вытащил нас с GPT-2 и нескольких видюх до десятимидлиардных мегакластеров.

И вот, спустя 5 лет, Суцкевер заявил о том, что этот закон перестает работать. Нешарящие из интернетов уже вопят «Альтман опять продает». И оказываются правы, но не по той причине, по которой им кажется.

Скорее всего, мы видим ситуацию в которой одни источники оптимизации и масштабирования перестают работать, но вместе с этим появится новые. Та же картина, которую мы наблюдаем в вычислениях последние ~100 лет и только небольшой кусочек которой мы решили назвать «Закон Мура».