Большие языковые модели и тренды в NLP | Мария Тихонова, Sber Devices

 

Вместе с Марией Тихоновой – Senior Data Scientist'ом из SberDevices и автором тг-канала t.me/mashkka_ds – обсудили, как работают большие языковые модели и как поменялись тренды в NLP с выходом ChatGPT, а еще: • В чем особенность R&D команд и над какими интересными проектами работают в SberDevices; • Как обучаются и оцениваются большие языковые модели (LLM)? • В чем особенность ChatGPT и как после его выхода изменились тренды в Natural Language Processing? Выпуск в аудио-формате:
Подписывайтесь на нас в соц. сетях: t.me/lingvo_podcast vk.com/lingvopodcast Ведущая: Мария Бочарова Монтажер: Андрей Чиркин Редактор: Вероника Артибякина Вопросы и предложения отправляйте на почту: lingvopodcast.hse@gmail.com Таймкоды: 0:40 Путь Маши в Data Science: мехмат МГУ, ШАД, Сбер 4:20 В чем особенность R&D команд? 7:28 Что драйвит Машу в ее работе? 9:38 Как параллельно работать, преподавать и писать диссертацию? 13:43 Что такое языковая модель? 17:33 Как обучаются мультиязычные модели? 18:40 В чем особенность ChatGPT? 21:00 Как оценивать результаты работы языковой модели? 24:44 Что такое бенчмарк 25:44 Почему языковые модели могут проваливаться на дошкольных заданиях? 28:22 Что такое AGI? 34:31 Интересные проекты от SberDevices 37:55 Про NLP конференции 41:38 Тренды NLP в 2024