Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Риски прихода сверхинтеллекта

Риски прихода сверхинтеллекта

В этой презентации мы прошлись по нескольким гипотезам и прогнозам - что может быть, какие риски и задачи будут перед человечеством при разработке сверхсильного ИИ

Андрей Цыган

September 18, 2023
Tweet

More Decks by Андрей Цыган

Other Decks in Technology

Transcript

  1. Массовое помешательство ИИ ассоциируется с фильмами ИИ называют что угодно

    Мы используем ИИ уже давно И чаще всего с роботами, злыми, которые поработят человечество Это уже маркетинговый термин - от ИИ аквариума до вычислений орбит инопланетян Начиная от рекомендаций на Aliexpress, выдачи кредитов до "портретной" сьемки в телефоне
  2. Основатель "Изи-Штандарт" и центра автоматизации "Pushka Lab" Андрей Цыган Образование

    CDTO Skolkovo Cambridge University Executive MBA Lean Green Belt 13+ опыта промышленное машинстроение сертификация автоматизация и цифровая трансформация blockchain-стартап Преподование Преподаватель ведущих бизнес- школ по теме автоматизации и цифровой трансформации 100+ публичных выступлений Автор более 50+ статей в области цифровизации Достижения Лучший консалтинговый проект - Gabriel al salem foundation (USA) 3 премии HR-brand Лучший цифровой проект ЕАЭС Гран-при "Бренд Года"
  3. Сегодня я вас загружу: Что такое сверхинтеллект? 1 Как он

    может повлиять? 2 Есть ли риски в его приходе? 3 Потенциальные проблемы согласования ИИ 4 Что делает команда OpenAI 5 Существующие кейсы 6
  4. Градации ИИ Слабый искусственный интеллект Сильный искусственный интеллект ИИ специализирующийся

    в одной, или нескольких смежных областях Универсальный ИИ - соответствует уровню интеллекта человека во всех областях
  5. Градации ИИ Слабый искусственный интеллект Сильный искусственный интеллект Искусственный сверхразум

    ИИ специализирующийся в одной, или нескольких смежных областях Универсальный ИИ - соответствует уровню интеллекта человека во всех областях интеллект, превосходящий лучшие умы человечества во всех областях, включая научную изобретательность, здравый смысл и социальные навыки
  6. МОМЕНТ В БУДУЩЕМ, КОГДА ИНТЕЛЛЕКТ НАШИХ ТЕХНОЛОГИЙ ПРЕВЗОЙДЕТ НАШ СОБСТВЕННЫЙ

    Технологическая сингулярность жизнь в привычном понимании изменится навсегда, а обычные правила ее существования больше не будут работать
  7. Это аналогично тому, если бы на Земле изменились бы законы

    физики ЧЕЛОВЕК БЕЗ ПОДГОТОВКИ ПРОСТО НЕ СМОГ БЫ ВЫЖИТЬ
  8. Аарон Саенц Cлабые ИИ сегодня подобны «аминокислотам в первичном бульоне

    юной Земли» — неживым компонентам всего живого, которые однажды ни с того ни сего пробудились
  9. Занимательная арифметика Приблительные оценки при текущих условиях когда мы можем

    достичь производительности мозга 35,58 TFLOPS Производительность 2810 Карточек в мозгу 1000 RTX 3090 18 Закон Мура 2 810 000 Стоимость аналога "ИИ мозга" 2038 Когда достигнем?
  10. Сравнение не в нашу пользу Максимальная частота нейронов мозга —

    около 200 Гц, современные процессоры - 2 ГГц, в 10 миллионов раз быстрее Мозг ограничен размером черепа,и он не может стать больше Компьютер может работать 24/7 с одинаковым результатом в течении долгого срока Не каждый мозг одинаково полезен,и срок "производства" - 9 месяцев Возможность точечного обновления прошивки - метод лучших практик За счёт интернета коллективный ИИ будет иметь доступ ко всем знаниям Скорость Размер и память Надежность и долговечность Реплицируемость Возможность модификации ПО Коллективный разум
  11. Мы просто не можем понять масштаб Это всё равно что

    муравей оценивал бы небоскрёб IQ 80 "Деревенский дурачок" IQ 140 Гений IQ 12952 У нас даже слова такого нет
  12. Точки выхода любого вида Вымирание Бессмертие Вид может сопротивляться -

    но в конечном итоге он исчезает Постоянное бессмертие как биологический вид
  13. Роли сверхразума Оракул ИИ ограниченный функцией ответа на вопросы. диагностика

    болезней прогнозирование трендов ответы на философские и этические вопросы Джинн ИИ с возможностью выполнять конкретные, высокоуровневые задачи создание новых материалов и технологий автоматизация производства Монарх Автономная форма ИИ с абстрактными целями и полной свободной действий решение глобальных проблем управление мировым правительством и экономикой
  14. Будущее со сверхразумом Версия Курцвейла Нанотехнологии 1 Изобилие ресурсов 2

    Слияние человека и машины 3 Бессмертие 4 Покорение вселенной 5
  15. Ричард Фейман Допустим, вам нужен вечный двигатель. Открытых физических законов

    уже достаточно, чтобы утверждать: либо это абсолютно невозможно, либо мы открыли какие-то не те законы. Однако в биологии еще не нашли никаких указаний на неизбежность смерти. Это приводит меня к мысли, что не так уж она и неизбежна
  16. Откуда нам может прийти кирдык? Природные Инопланетные Антропогенные астероид, новый

    вирус, изменение атмосферы уничтожение человека более развитой агрессивной расой ядерная война, оружие планетного поражения, вышедший из-под контроля сверхразум
  17. Что делаем мы во благо цели? Эволюционная цель человека -

    передать свои гены Самосохранение 1 Безопасность 2 Поиск ресурсов 3 Поиск партнёра 4 Уничтожение ненужного 5
  18. Идеальные когнитивные навыки ИИ Самоулучшение интеллекта Стратегии Социальная манипуляция Постоянное

    улучшение без посторонней помощи Выработка долгосрочных планов, шагов, анализ и моделирование У машины все лучше получается убеждать людей
  19. Сделай нас счастливыми Быть в безопасности Постоянно улыбаться Мир во

    всём мире Чип в голову и правильный импульс Заперты дома навечно
  20. Сделай нас счастливыми Быть в безопасности Постоянно улыбаться Мир во

    всём мире Чип в голову и правильный импульс Заперты дома навечно Один укол - и ваши мышцы всегда будут в улыбке
  21. Сделай нас счастливыми Быть в безопасности Постоянно улыбаться Мир во

    всём мире Чип в голову и правильный импульс Заперты дома навечно Один укол - и ваши мышцы всегда будут в улыбке Нет людей - нет войны
  22. Цель - довезти максимально быстро до места Никого не сбивай

    Сохраняй пассажиров Сохраняй имущество Соблюдай ПДД,в т.ч "помеха справа"
  23. Список целей для сверхразума Последняя рулетка Убрать несправедливость Устранить голод

    Колонизировать Вселенную Построить город из Lego Вырастить гигантский одуванчик
  24. Резюме что мы узнали о сверхинтеллекте Развитие идет в 3

    этапа. Мы сейчас на пути к сильному ИИ Время перехода сильного к сверх ИИ будет намного меньше Мы не можем представить масштаб сверхинтеллекта У нас самих плохо с целями и следованиям им Процесс уже необратим 1 2 3 4 5
  25. Саммари подразделения Команда Мощности Срок Сотрудничество Илья Суцкевер и Ян

    Лейк 20% всех мощностей OpenAI 4 года Работа с правительствами и обратной связью
  26. Проблема масштабирования 7 человек Нет специалистов Гигантский масштаб AI aligment

    researcher Изначальная команда AI Aligment OpenAI Все идут в разработчики нейросетей Оценить и разметить все генерации Решение
  27. Привлечение сторонних команд Границы помощников ИИ Может ли не отвечать

    ИИ? Медицинские, финансовые советы Может ли оказывать эмоциональную поддержку? Может ли ИИ определять пол, расу, религию? Должен ли ИИ менять ответы в зависимости от региона?
  28. Тренировка на видео данных Tik-tok /Youtube Возможность обучения на камерах

    Обучение навыкам Расскажут намного больше о реальном поведении Как на самом деле ведет себя человек Через такие видео модель может приобрести навыки в реальном мире - роботы скажут спасибо
  29. Умение договариваться Дерево решений Покер и Дипломатия Стратегия Обдумывание каждого

    шага Обучение в играх, основанных на поведении людей ИИ система вошла в топ 10% лучших игроков в дипломатии
  30. Текущие инициативы Лидеры рынка Внимание правительства 1 Создание AI Aligment

    департаментов 2 Привлечение специалистов 3 Работа над качеством моделей 4 Внедрение алгоритмов с других сфер 5
  31. А 3к квартира в центре за 200$ ещё свободна? Вернемся

    к нашим баранам Развитие ИИ может только усугубить ситуацию с мошшеничеством CHATGPT ВАШ профиль Ваши фото
  32. Текстовая дезинформация Фабрики тролей Имитация стиля Несуществующие люди Идеальный диалог

    Стоимость содержания близиться к 0 По открытым текстам копируется лексика автора Знакомство и общение, и любовь к нейросети ИИ не устаёт покупать ваши тапочки
  33. Дипфейки Нежелательное копирование голоса Хотите стать актёром дубляжа порно? Звонки

    родственникам Мама, я попал в аварию, дай биткоин Видео дипфейки От шантажа до инструкций Фейковые новости "арест трампа" Подтверждение знакомого Клонируется 3я сторона, которая подтверждает операцию
  34. Корпоративная опасность Подделка подписи Приказ бухгалтеру Фишинговые письма и боты

    Чёрный маркетинг При нужном объеме документов Срочно проведи этот счёт (сгенерированный) Подключение к нейросети через "прокладку" Очень реалистичные отзывы, истории клиентов
  35. Что МЫ можем делать сейчас? Просвещение Безопасность Исследование 90% в

    нашем регионе имеет совсем слабые знания о технологии Введение личных протоколов защиты от фейков и ИИ копий Выделять ресурсы на эксперименты и исследования