Dialogue Evaluation 2018

Разрешение лексической многозначности

На конференции Диалог-2018 впервые пройдет дорожка по извлечению смыслов слов из текстов и разрешению лексической многозначности для русского языка. Участники cмогут оценить качество работы современных моделей векторных представлений (word sense embeddings) для русского языка и других методов разрешения лексической многозначности.

Тестовые данные для дорожки уже доступны. Благодаря использованию платформы CodaLab, участники смогут увидеть предварительную оценку своих результатов относительно других участников сразу после отправки данных. Финальная часть оценки продлится с 15 декабря 2017 года по 15 января 2018 года. 

Подробная инструкция участника доступна на Github: https://nlpub.github.io/russe-wsi-kit. Подробное описание задания, наборов данных и базовых методов решения задачи можно найти по адресу: http://russe.nlpub.org/2018/wsi.

Для участия в дорожке нужно заполнить следующую форму: https://goo.gl/forms/fnTNOwk4PrsZySX82

Важные даты:

  • Первое информационное письмо: 15 октября, 2017.
  • Публикация обучающей выборки: 1 ноября, 2017.
  • Публикация тестовой выборки: 15 декабря, 2017.
  • Срок подачи моделей: 15 января, 2018.
  • Объявление результатов дорожки: 1 февраля, 2018

Вопросы о дорожке можно направлять по адресу rusemantics@googlegroups.com