Программа презентации проекта «Культурные замеры больших языковых моделей: концепция, принципы разработки и тестирования культурологического бенчмарка» 17 декабря 14:00

См. пост выше

Модератор — руководитель исследовательской группы Центра междисциплинарных исследований МФТИ Максим Кронгауз.
На презентации будет представлен инструмент для исследования встроенности больших языковых моделей (LLM) в русскоязычную культуру. Он включает в себя методику выявления культурных типажей, построения культурологических карт, а также принципы создания вопросов, ответы на которые подразумевает знание определенных культурных и языковых стереотипов.
Исследователи исходят из того, что носитель культуры обладает набором указанных стереотипов, и с помощью вопросов проверяют знание этих стереотипов моделью. Инструмент позволяет определить способность современных языковых моделей считывать культурный контекст и реагировать естественным образом на устойчивые стимулы.

Доклады:
М. Кронгауз, В. Шульгинов: «Снятся ли большим языковым моделям электроовцы: концепция и задачи проекта»;

О. Мороз и Д. Калачева: «Машины говорят с человеком: основы лингвокультурного исследования больших языковых моделей»;

Е. Громенко «Измерение языковых стереотипов: речевые клише в тестировании больших языковых моделей»;

К.Клокова, Т. Юдина «Механизм тестирования и интересные случаи оценки LLM».

#конференции@digital_philologist
#ии@digital_philologist

😑 Презентация проекта "Культурные замеры больших языковых моделей"
Когда: 17 декабря, 14:00
Где: https://mipt-ru.ktalk.ru/x55kmvg4txf1

Команда исследователей МФТИ (М.А. Кронгауз, В.А. Шульгинов, К.С. Клокова, Т.А. Юдина) вместе с приглашенными экспертами в области культурологии и лингвистики представит инструмент для анализа встроенности больших языковых моделей в национальную культуру (в нашем случае – в русскую). Будет описана методика выявления культурных типов и разработки культурологических карт, а также принципы создания вопросов, ответы на которые подразумевают знание определённых культурных и языковых стереотипов. Кроме того, мы поделимся результатами тестирования самых передовых языковых моделей и расскажем о главных трудностях в их культурной адаптации.Будем рады обсудить с Вами как само исследование, так и перспективы его использования в качестве сравнения и развития моделей!

Присоединяйтесь к обсуждению ✈️

#НОД_ДПО Базы данных для гуманитариев

16 декабря приглашаем на круглый столПрикладного центра МАСТ и Школы вычислительных социальных наук.

На мероприятии вы:
✨ узнаете, какие доступные инструменты могут использовать ученые в области социальных и гуманитарных наук, чтобы самостоятельно создавать базы данных, не прибегая к помощи разработчиков
✨ узнаете, как самостоятельно справиться с проблемами, возникающими при работе с базами данных
✨ получите ответы на вопросы о существующих и будущих программах дополнительного профессионального образования Школы.

Спикеры: Иван Бибилов (ЕУСПб), Евгений Котельников (ЕУСПб), Анна Козлова (ЕУСПб), Евгений Соколов (ИЛИ РАН / ЕУСПб), Игорь Егоров (ИЛИ РАН), Полина Колозариди и Гавриил Беляк (ИТМО).

Мероприятие пройдет в Европейском университете на ул. Гагаринской, 6/1. Предусмотрена онлайн-трансляция.
Начало в 13:00.

Регистрация