◼В 15:35 научный сотрудник AIRI Михаил Сальников сделает краткий обзор современных методов работы с графами знаний посредством больших языковых моделей.
◼В 15:55 кандидат компьютерных наук, научный сотрудник AIRI и НИУ ВШЭ Елизавета Гончарова расскажет про последние достижения в области интерпретации работы современных языковых моделей, а также ответит на вопрос, можно ли как-то изменить факты, которые модель запомнила в процессе обучения.
◼В 16:15 старший научный сотрудник MBZUAI Артем Шелманов расскажет про оценку неопределенности, как об эффективном подходе к проблеме галлюцинаций языковых моделей. Затронет тему систематизации усилий по оценке неопределенности для генеративных языковых моделей, а также расскажет о распространенных подводных камнях и даст предложения по разработке новых методик в этой области.
◼В 16:35 научный сотрудник AIRI, аспирант МФТИ Олег Сомов обсудит проблему генерализации в NLP, в частности в домене семантического парсинга. В докладе будет рассказано о сложностях адаптации первого русского text-to-SQL датасета PAUQ, о том как работают SoTA модели на эмулированных сдвигах распределения text-to-SQL данных и о влиянии специализированных методов обучения моделей на различные аспекты генерализации.
◼В 16:55 Team Lead AGI NLP R&D SberDevices Алена Феногенова расскажет про новый открытый бенчмарк MERA для русского языка для оценки больших языковых моделей от Альянса ИИ. В докладе будут освещены подробности о методологии бенчмарка и его особенностях.
Теги: online
Мероприятия сообщества
Event at a glance
- Who it is for
- NLP researchers, ML engineers, data scientists
- Main topics
- natural language processing, large language models, knowledge graphs, model interpretability, uncertainty estimation, generalization, Russian NLP benchmark
- What you will gain
- overview of modern methods for knowledge graphs with LLMs, understanding LLM interpretability, learn about uncertainty estimation to reduce hallucinations, insights into generalization for semantic parsing, introduction to MERA benchmark for Russian
- Program format
- deep technical talks, research presentations