Как работает ChatGPT: объясняем нейросети просто

Следующие видео из серии про ИИ:

Прослушать выпуск как аудиоподкаст:

Поддержи проект RationalAnswer:

СОДЕРЖАНИЕ:
00:00 – Интро
00:31 – T9: языковая модель в телефоне
02:43 – Откуда нейросети берут вероятности слов?
05:41 – Почему языковые модели умеют в творчество
08:16 – 2018: GPT-1 и архитектура Трансформера
11:47 – 2019: GPT-2, или 7000 Шекспиров в нейросети
15:25 – Как измеряется сложность и размер моделей
22:07 – 2020: GPT-3, или Невероятный Халк
26:13 – Промпты, или как правильно уламывать модель
28:06 – Январь 2022: InstructGPT, или воспитание строптивой
33:51 – Ноябрь 2022: ChatGPT – хайпуют все!
38:05 – Подводим итоги

[RobMelbu]

Помню восторги 30 лет назад при обсуждении шевелящийся GIF-ки. Прогресс заметен.

[НаталияДавыденко-шэ]

Как мне повезло, что задавшись целью разобраться что такое нейросети, я сразу попала на ваше видео. Все понятно простым языком. Благодарность вам за ваш труд. Подписка и лайк. У вас действительно редкий талант доносить просто о сложном.❤

[needfreenames]

да чтоб все ролики с объяснениями на ютубе были так построены! Огромное спасибо за безводие, послеодвательность и подытоживания! Это было рэйшнл! респект!

[DJmag]

Павел, у вас талант, разжёвывать сложные вещи, в простые и понятные примеры!

[ArnoldHeinz]

Самое доступное, интересное, полное и увлекательное объяснение темы о ChatGPT. Уже нескольким знакомым дал ссылку на этот ролик. У них такое же мнение после просмотра. Мало кто умеет так точно и понятно объяснять. Это - талант. Спасибо авторам ролика за этот шедевр!

[uzimauser]

Никогда ещё приготовление и поглощение пельменей не было таким познавательным! Спасибо за видео, кайфанул!

[SebastianRoberts-qqyk]

Это безусловно профессиональный выступление! Замечательно объясняет закономерности и принципы работы ChatGPT. Очень рад, что такой интересный способ предоставления информации о нейросетях.

[Prostopravda]

Приятно, когда в видео сочетаются интеллект и юмор. Лайк и подписка.

[udik]

Ролик - огонь! Я даже понял, о чем речь. Многие иллюзии рассеялись. Спасибо огромное! Прекрасно в этом ролике всё. А главное - всё достаточно понятно, прямо на пальцах объяснено.

[Syllogist]

Видос отличный! Всё кратко, доступно и хорошо рассказано. Однако, кое-что требуется уточнить (в том числе и для И.Котенкова): в утверждении о развитии GPT-1 до GPT-2 (22:00 «количественный рост привел к тому, что модель неожиданно самообучилась качественно новым навыкам») речь может идти только о внутрисистемных качественно-количественных вариациях как ПОРЯДКОВЫХ изменениях, а именно – об использовании модели, превосходящей эталон сравнения (21:47 «по размеру самой модели, то есть числу параметров в 10 раз»). Не более. Это – не «самообучение», а только ПОРЯДКОВОЕ увеличение точности анализа накопленной статистики, сделанное на основе того же самого «обучения» (но ни в коем случае не процесса «самообучения»!). То же самое и для GPT-3, 3.5, 4, 5... и для всех следующих версий, основанных на формировании и коэффициентировании связей в нейросети в процессе внешнего обучения. Никакого «самообучения» и никакой (25:28 «магии») тут нет.

«МАГИЯ» НАЧНЁТСЯ ТОЛЬКО ТОГДА, КОГДА... НЕЙРОСЕТЬ ПОЛУЧИТ ВОЗМОЖНОСТЬ ИЗ ИМЕЮЩИХСЯ В ЕЁ БАЗЕ ДАННЫХ ПОЛУЧАТЬ НОВЫЕ ЗНАНИЯ (т.е. ДЕЛАТЬ ОБОСНОВАННЫЕ УМОЗАКЛЮЧЕНИЯ, РАНЕЕ В ПРЯМОМ ВИДЕ В НЕЁ НЕ ЗАЛОЖЕННЫЕ). Именно это и будет означать надстройку над системами Искусственного Интеллекта (ИИ) КАЧЕСТВЕННО нового уровня – уровня ИНТЕЛЛЕКТУАЛЬНЫХ СИСТЕМ (ИС). Подробнее – тут:

и т.д.

ТОЛЬКО В ЭТОМ СЛУЧАЕ МОЖЕТ РЕАЛЬНО СБЫТЬСЯ ВЫСКАЗАННОЕ В ЭТОМ ВИДЕО ПОЖЕЛАНИЕ (29:12 «...было бы здорово, если бы модели, они как-нибудь сами научились бы, во -первых, из коротких инструкций, сами для себя придумывать более развернутые инструкции, исходя из того, что они ожидают, человек бы хотел увидеть. Ну и во -вторых, они бы учились исполнять эти инструкции таким образом, чтобы вот опять же предсказывать ожидания людей)...

А ПРЕДСКАЗЫВАТЬ – как уже давно известно - можно только на основании ПРАВИЛЬНО РАССЧИТАННЫХ ЦЕПОЧЕК СИЛЛОГИСТИЧЕСКИХ УМОЗАКЛЮЧЕНИЙ. Подробнее – тут:

и т.д.

УСПЕХОВ!

[sergeynovikov]

просто и ясно на хорошем языке для чайников. супер! обязательно продолжайте!)

[staceysummer]

Обычно никогда не слушаю ничего научного!! Но это видео реально интересное! 👍 Спасибо 😃

[colddeath]

Это просто супер! Спасибо огромное за проделанную работу и объяснения! Пожалуйста продолжай эту серию!

[adelayeeda]

Благодарю! Это самое содержательное объяснение по теме в русскоязычном ютубе 🧨

[ASPable]

Великолепное умение изложить сложную тему доступными понятиями и языком! Спасибо Вам большое!

[paulshayde]

Спасибо большое за выпуск! Действительно, очень простым и понятным языком всё изложено)

[elenatschernjavski]

Спасибо! Очень простым и понятным языком всё изложено.👍👍👍👍👍

[difficultdo]

Огромное спасибо за объяснение технологии простыми словами и юмором.

[ОльгаКокарева-мй]

Павел! Как классно! Вчера Андрея всего пересмотрела, сегодня ты! ❤❤❤очень полезно!

[Mh]

Спасибо, кайфанул, жду новый ролик про gpt4