Интересно про цифровое сознание. Мы туда движемся с двух концов:

Со стороны ML, постепенно создавая все более хорошо генерализирующие ИИ-модели. Которые, по еще неизвестным нам законам природы, в итоге приобретут сознание для успешного решения задач AGI/ASI.

Со стороны нейронаук через оцифровку работы мозга. Мозг мухи уже отсканировали, а значит в теории можно симулировать химические процессы для воспроизводства его работы. А затем масштабировать до человеческого сознания.

Пока не очень понятно какой из путей будет быстрее, но у меня есть сильное ощущение, что они оба ведут к одному и тому же.

Контент, созданный человеком (видео, музыка, тексты), станет таким же редким и нишевым явлением, как сделанная вручную мебель сегодня — его будут ценить за уникальность, несовершенства и историю создателя.

Всё остальное будет создано искусственным интеллектом.

Сцена из фильма где Уилл Смит спрашивает робота может ли тот рисовать картины и сочинять музыку :)

Буду по мере возможностей писать про новости с Devcon — главной конференции года про Эфир и блокчейн. К сожалению, у меня не будет возможности провести много времени (а, возможно, и просто зайти) на основной конференции, потому что каждый день здесь маса AI/ML/deAI эвентов, на многих из которых у меня доклады. Но про DeAI вы и так знаете, а вот в эфире много всего очень крутого происходит.

Один из главных трендов в снижении сложности запуска L2 и упрощении UX (account abstraction, chain abstraction) до такой степени, что пользователю больше не нужно задумываться о том какой блокчейн он использует, в чем нужно платить газ и как перевести между ними токены. Это делает Appchain идею возможной — у каждого успешного приложения теперь есть свой чейн. ZERO, Unichain, а сегодня вот еще ENS анонсировали Namechain.

Интересные времена впереди. Это приведет к большей гибкости приложений, удобству для непрошаренных юзеров, которые в крипте не из-за идеологии, гиковатости или жадности, а просто потому что им нужно решить понятные и просты проблемы: купить домен, перевести деньги, сделать депозит, платить зарплату, привлечь финансирование, сделать донат и т.д.

Удивительный ужин. Познакомился с:

1. Фаундером проекта, в который перешла команда, которая сделала скан мозга мухи. Теперь работают над мышью. Будем изучать и подумаем как работать вместе.

2. Квантовым биологом, который делает эксперимент по подтверждению или опровержению квантовой или пост-квантовой (по Пенроузу) модели сознания.

Вот тебе и поездка на крипто-конференцию.

#неДубай

Горячая дискуссия в интернетах: стена или нет стены.

Поясню. Намедни Илья заявил, что закон масштабирования в LLM уперся в стену. Амодей и Альтман отрицают и говорят что прогресс в способностях нейронок движется как и раньше, а может даже и шустрее.

Законы масштабирования придумали дата сатанисты, чтобы описать почему парадоксальным образом добавление
1) данных
2) компьюта
3) параметров в модели
при претрейне больших трансформеров вдруг очень линейно и предсказуемо увеличивает качество самих моделей. С 2019 года этот закон работал как часы и вытащил нас с GPT-2 и нескольких видюх до десятимидлиардных мегакластеров.

И вот, спустя 5 лет, Суцкевер заявил о том, что этот закон перестает работать. Нешарящие из интернетов уже вопят «Альтман опять продает». И оказываются правы, но не по той причине, по которой им кажется.

Скорее всего, мы видим ситуацию в которой одни источники оптимизации и масштабирования перестают работать, но вместе с этим появится новые. Та же картина, которую мы наблюдаем в вычислениях последние ~100 лет и только небольшой кусочек которой мы решили назвать «Закон Мура».

Читаю переписку Альтмана и Маска. Вот из письма 2015 года, когда они обсуждают найм в OpenAI, пару месяцев после основания компании: «Either we get the best people in the world or we will get whipped by Deepmind. They are obviously making major progress and well they should, given the talent level over there» — пишет Маск.

Из переписки очевидно, что и Илье и Илону уже в 2015, за два года до публикации пейпера про трансформеры, были очевидны не только законы масштабирования deep learning’а, но и то что, скорее всего, это приведет к AGI в скором времени и еще в 2016 Маск пишет «AI, arguably the most powerful of all technologies».

О DevCon: что обсуждали, к чему пришли, куда идти дальше?

Об эфире
— Масштабирование эфира через ролапы идет успешно, сегодня более 200 активных сетей и миллионы пользователей. Но многие из этих сетей не интероперабельны (нельзя без централизованного бриджа послать деньги с одного на другой) и их безопаность держится на мультисиге и такой-то матери (все что меньше чем STAGE 1 имеет очень реальные угрозы)
— Джастин Дрейк предлагает нативные ролапы для эфира: добавить снарки в базовый протокол и сделать создание ролапа таким же простым, как смарт-контракта. Для более сложных кейсов можно будет делать свои based ролапы или отдельные L2.
— В следующих апдейтах эфир так же достигнет: финальности в 1 блок, стать валидатором можно имея всего одну эфирку, пост-квантовая криптография, снарки в базовом протоколе. В итоге это даст больше масштабируемости и безопасности.
— Но это не будет быстро, ибо это достройка космолета в полете, а в космолете прямо сегодня почти $500B ценности включая нативный токен и TVL.

Об экосистеме
— Нет приложений — нет проблем. Я не вижу отсутствие приложений как проблему. Основные кейсы использования криптовалюты — платежи, кредитование, финтех и проектирование систем без разрешений — растут и требуют просто более простого и дешевого решения, что неизбежно случится и что невозможно сделать в банковской инфре.
— Криптовалюта — это инфраструктура. Это бэкэнд для новых типов институтов и систем. И Ethereum прекрасно справляется с этим.
— У ИИ противоположная проблема: слишком много приложений, большинство из которых в следующем году будут частью вашего любимого чат-бота. Нам нужна открытая и разрешённая ИИ инфраструктура, и это, безусловно, крупнейшая возможность в криптовалюте.

О будущем
— Ethereum — это тысячи замечательных людей, которые не парятся о цене токенов и рыночных нарративах. Это комьюнити никогда не проиграет краткосрочным хайповым альтернативам.
— Кибернетическая экономика неизбежна. Бюрократическое, ручное и непрозрачное будет заменено на саморегулируемое, программируемое и распределённое.
— big tech / big state → кибернетическая программируемая экономика.
— Бангкок немного похож на киберпанк, но Devcon и организация большинства сайд эвентов на 10/10 (плюс, пасхалка на моей футболке)