Mikhail Samin
1.54K subscribers
1.35K photos
137 videos
12 files
1.68K links
Effective altruist, founded AudD.io, printed 21k copies (63k books!) of гпмрм.рф. He/him, bi 🏳️‍🌈

Contact me: @Mihonarium

contact.ms
x.com/mihonarium
Download Telegram
Mikhail Samin
1200 трёхтомников отправлены победителям олимпиад, 800 — в библиотеки, но остаются ещё тысячи. Поэтому дарю книжки!

📚 Если до конца октября пройдёте AI Safety Fundamentals — свободный курс о проблеме алайнмента, которой занимается Юдковский, который создали при поддержке сотрудников OpenAI, DeepMind и Anthropic (материалы на английском), подарю вам трёхтомник ГПиМРМ.

Бесплатные самовывоз в Москве и курьерская доставка по России. После прохождения пишите мне в личные сообщения.

Курс — https://course.aisafetyfundamentals.com/alignment

(На всякий случай: предложение в первую очередь для тех, кто может пройти курс в оригинале. к сожалению, если вы проходите курс с помощью переводчика многие детали могут быть утеряны; если вы поймёте все материалы курса, мы готовы будем отправить вам книги; если понятно, что вы действительно всё прошли, но понимаете какие-то моменты так себе, можно будет забрать экземпляр самовывозом; если какие-то из ключевых моментов не удалось понять, к сожалению, такого прохождения недостаточно)
Mikhail Samin
Live stream scheduled for
Mikhail Samin
Mikhail Samin
Live stream scheduled for
Думаю, попробую провести небольшое Q&A о безопасности искусственного интеллекта. Задавайте вопросы и голосуйте за заданные другими по этой ссылке

Upd: оказывается, ссылка не открывается из России без VPN, можете задавать вопросы комментариями к этому посту
Mikhail Samin
Live stream started
Mikhail Samin
Mikhail Samin
Live stream started
Начинаем через несколько минут. Можно продолжать задавать вопросы по ссылке и в комментариях
Mikhail Samin
Live stream finished (1 hour)
Mikhail Samin
TED talk Юдковского наконец выложили
https://youtu.be/Yd0yQ9yxSYY | https://www.ted.com/talks/eliezer_yudkowsky_will_superintelligent_ai_end_the_world

(У него было четыре дня на подготовку. В начале опубликованной записи вырезано "You've heard that things are moving fast in artificial intelligence. How fast? So fast that I was suddenly told on Friday that I needed to be here. So, no slides, six minutes")
Mikhail Samin
Китай на сегодняшнем Совбезе ООН: “The potential impact of AI might exceed human cognitive boundaries. To ensure that this technology always benefits humanity, we must regulate the development of AI and prevent this technology from turning into a runaway wild horse. […] We need to strengthen the detection and evaluation of the entire lifecycle of AI, ensuring that mankind has the ability to press the pause button at critical moments”
Mikhail Samin
Mikhail Samin pinned «Как я писал, форкастеры на Metaculus недооценили возможность новых скачков. Медиана даты weak AGI на Metaculus опустилась до 2025 — по лучшей существующей оценке, вместо десяти лет осталось два с половиной года. (В мае прошлого года я предсказал там 2026…»
Mikhail Samin
Давно не делился тут новостями!

Время от времени пишу в Твиттер. Например, попытался проверить скилл Юдковского удивляться вымыслу больше, чем реальности, но реальность отказалась быть удивительной (маловероятное стечение обстоятельств -> пранк не сработал): https://twitter.com/Mihonarium/status/1706219836727341146

Все средства, собранные на краудфандинге в 2018, официально потрачены (и ещё >миллиона сверху). Подробности и отчётность. 150 личных трёхтомников решил подарить за пожертвования на отправку книг победителям олимпиад и в библиотеки; ещё экземпляр можно получить за пожертвование в MIRI. (Пишите в личные сообщения, @Mihonarium)
Mikhail Samin
💔
Mikhail Samin
Невозможно писать эти слова и не плакать. Навальный прожил жизнь героем. Невероятно смелым, умным и честным. Политиком, боровшимся за то, чтобы сделать Россию свободной и прекрасной. Он был убит Путиным после 1125 дней в тюрьме и умер героем. Россия и мир его не забудут; герои не умирают.

Глубочайшие соболезнования семье и коллегам Алексея.
Mikhail Samin
Саша (одна из моих самых близких друзей) запустила стартап про community management. Они на очень раннем этапе, но у них уже есть довольно крутой продукт и клиенты. Классные фичи вроде резкого уменьшения токсичности сообществ с помощью reward-shaping’а троллей: они останавливают друг друга от написания гадостей, потому что это приводит к автоматическому появлению/увеличению обязательной паузы между сообщениями. Если вам такое интересно (а предотвращение неконтролируемого экзистенциально опасного ИИ не интересно), идите к ним работать!

https://t.me/elidoc0rc/6305
Mikhail Samin
We published a paper—with coauthors from Technion, Transformative Futures Institute, and US IC’s National Intelligence University.

We argue that to ensure audits are continuously robust to the rapidly evolving capabilities of AI systems, industry, auditors, safety advocates, ethicists, academia, and government regulators should all be collaborating on an inclusive organisation for audit standards setting.

Standards should draw from existing examples of industry best practices, including in the aviation and nuclear industries. As such, audits should focus on more than just evaluating the final product (the models), they should also assess the process behind it: the companies, their governance, and, critically, safety culture.

arxiv.org/abs/2404.13060
Mikhail Samin
Mikhail Samin
Вау, 23 🥳
Исполнилось 24! 🎉

За последний год переключился на AI governance: стало понятно, что основной путь, которым человечество выживает — государства обращают внимание на проблему экзистенциального риска от искусственного интеллекта и глобально предотвращают запуск обучения таких моделей, какие потенциально несут угрозу человечеству.

Сейчас нахожусь в процессе запуска НКО, которая будет повышать осведомлённость о проблеме и повышать вероятность адекватной реакции со стороны правительств.

Ещё переехал в Англию.