Наша географияЗаявка на членство+7 916 848-78-01info@rusneuro.net
О НейроНетеНаша миссияЧлены союзаНовостиПресс-центрДокументыАрхивКонтакты
Новости / The conversational intelligence challenge finals

The conversational intelligence challenge finals



On Dec. 8 the Conference on Neural Information Processing Systems (NIPS) hosted the finals of Conversational Intelligence Challenge. The challenge was organized within the collaboration of AI research universities.

Conversational artificial intelligence (AI) is a task of having meaningful dialogue with a user and acting as human as possible. This challenging and complex problem is considered to be one of the core tasks that true AI should pass. Dialogue agents -- programmes capable for having a conversation -- surround us everywhere: from bots that we chat with on messengers to personal assistants and voice control interfaces. While dialogue systems are becoming more widespread, there is still a great deal of work involved in making conversational intelligence more sophisticated.

To create dialogue systems, we need two things: More data to train on (examples of conversations), and a reliable and fast ways to evaluate the quality of these dialogues. The competition gathered chatbots developed to define which techniques would make a chatbot appear intelligent. The competition also aimed at working out approaches for chatbots evaluation and at human-to-machine dialogues collection for further end-to-end dialog systems training.

During the competition, chatbots had to talk with users, who then assessed the quality of these conversations. The competition was held in two stages: At first round, organized by the Neural Networks and Deep Learning Lab this summer, the participants of the hackathon talked to the systems. The final stage took place at the NIPS conference, where the scientific community tested chatbots. Reflecting the wider AI boom, over the past few years the NIPS conference has grown from a small gathering of a few hundred academics to a sprawling event with thousands of attendees, big-name corporate recruiters, and lavish parties. During the Challenge, the bots conducted about 3500 dialogues, about 400 of which were judged by users as meaningful. The dialogues will be further examined to find out what factors involved in maintaining meaningful conversation and how we could measure its quality. This knowledge will help to improve tools for creating dialogue systems.

Six teams from the University of Wroclaw, Moscow Institute of Physics and Technology, McGill University, KAIST & AIBrain & Crosscert, UMass Lowell's Text Machine Lab & Trinity College, Hong Kong Polytechnic University, and Fudan University took part in the competition finals.

The first prize was awarded to 2 winning teams: Moscow Institute of Physics and Technology team (Idris Yusupov, Yurii Kuratov) and University of Wroclaw team (Jan Chorowski, Adrian Lancucki, Szymon Malik, Maciej Pawlikowski, Pawel Rychlikowski, Pawel Zykowski).

Both teams used similar approaches: they developed modules that processed different scenarios (having a small talk, answering factoid questions asked by a user, engaging a user into talk about himself/herself, processing unrecognized input from a user), and a command module that decides which routine should step in. This is now considered a state-of-the-art technique for chatbot development. Even though these chatbots do not contain any novel methods (i.e. methods not published anywhere before), they represent good proofs of concept for existing approaches. Moreover, these solutions will be open-sourced and can now serve as a starting point for further research in dialogue systems.

The Conversational Intelligence Challenge attracted the interest of frontiers in conversational AI - Google AI, Facebook research, Amazon, Microsoft, and will be held annually.

The competition was organized by Moscow Institute of Physics and Technology, Université de Montréal, McGill University, and Carnegie Mellon University in partnership with Facebook Research, Flint Capital, IVADO, Maluuba, and Element AI.

For more information:

Olga Kairova
Deputy Head of Neural Networks and Deep learning Lab
Moscow Institute of Physics and Technology

Competition: http://convai.io/
NIPS competition track https://nips.cc/Conferences/2017/Schedule?showEvent=8748


Mikhail Burtsev, Valentin Malykh, Varvara Logacheva, Neural Networks and Deep learning Lab, Moscow Institute of Physics and Technology https://mipt.ru/english/research/labs/neural-networks-and-deep-learning-lab

Iulian Serban, Yoshua Bengio, Montreal Institute for Learning Algorithms, Université de Montréal https://mila.quebec/en/

Ryan Lowe, Reasoning and Learning Lab, School of Computer Science, McGill University http://rl.cs.mcgill.ca/index.html

Alexander Rudnicky, Alan W. Black, Shrimai Prabhumoye, School of Computer Science, Carnegie Mellon University https://www.cs.cmu.edu/


Flint Capital http://www.flintcap.com is an international venture capital fund established by IT entrepreneurs with the primary mission of discovering and supporting bold-thinking founders and their teams from Europe, Israel and US across a number of industries. Flint capital leads funding rounds at the Seed, Series A and Series B stages, focusing on companies that have the potential to disrupt their respective industries. Flint Capital has an extensive expertise in artificial intelligence and machine learning. Previously Flint Capital has supported the following AI/ML companies: WalkMe, YouAPPI, CyberX, Epistema, Flo, Findo. Flint Capital has had several significant exits amongst portfolio companies, including Lending Club and Blazemeter, with current investments in dozens of industry leading companies, including WalkMe, CyberX, Virool and Findo. Flint Capital has offices in Palo Alto, Berlin, Boston, Moscow and Tel Aviv.

Facebook Research https://research.fb.com/

IVADO https://ivado.ca/

Maluuba http://www.maluuba.com/

Element AI https://www.elementai.com/

20.04.2018Обзор новостей нейротехнологий 16.04.18 - 20.04.18

Самые актуальные новости за неделю

19.04.2018«АКАДО Телеком» и лаборатория МФТИ будут развивать технологии искусственного интеллекта

«АКАДО Телеком» и Московский физико-технический институт (МФТИ) подписали  соглашение о стратегическом партнерстве в области развития искусственного интеллекта

18.04.2018Объявлены номинанты BCI Award 2018

Впервые в шорт-лист вошел проект с ведущим российским участием

17.04.2018В Москве открылась площадка нейротехнологий NeuroHub

В начале апреля в Москве состоялось открытие NeuroHub – новой площадки для развития проектов в области нейротехнологий

13.04.2018Обзор новостей нейротехнологий 09.04.18 - 13.04.18

Самые актуальные новости за неделю

12.04.2018Аспирин не эффективен для каждого третьего россиянина и может быть опасен для каждого седьмого

В результате нового исследования, научные сотрудники Genotek выяснили, что 30% россиян являются носителями хотя бы одного генетического маркера, при котором лечение аспирином в рекомендованных дозировках неэффективно

10.04.2018Фонд содействия инновациям профинансирует 250 проектов в рамках НТИ на сумму 3 млрд рублей

Фонд содействия инновациям объявляет о начале сбора заявок по конкурсам, направленным на поддержку реализации планов мероприятий Национальной технологической инициативы («дорожных карт» НТИ).

9.04.2018«Нейроботикс» проводит испытание нейротренажера

6 апреля 2018 года компания «Нейроботикс» совместно с партнером «Клинический центр медицинской реабилитации» начали испытания нейротренажера, направленного на восстановление двигательной активности кисти у пациентов после инсульта.

6.04.2018«Уральский Нейронет-центр» начнет свою работу летом 2018 года

4 апреля отраслевой союз «Нейронет» и Уральский федеральный университет имени Б.Н. Ельцина подписали соглашение о создании Нейронет-центра на базе университета.

6.04.2018Обзор новостей Нейротехнологий 02.04.18 - 06.04.18

Самые актуальные новости за неделю

3.04.201829 марта 2018 года в Москве прошла IV Международная практическая конференция по робототехнике РобоСектор-2018

Тематика конференции в этом году была посвящена такому важному вопросу, как интеграция людей и роботов

30.03.2018Обзор новостей нейротехнологий 23.03.18 - 30.03.18

Самые актуальные новости за неделю

30.03.2018Опубликованы записи выступлений на Третьей международной конференции BCI: Science and Practice. Samara 2017

Среди спикеров конференции, состоявшейся в 2017 году, - российские и зарубежные ученые с мировыми именами.

27.03.2018Созданный в СамГМУ нейротренажер будут производить на предприятии ИМЦ концерна «Вега»

В рамках закрепленных соглашением договоренностей в серийное производство будет передана линейка созданных в вузе разработок по нейрореабилиатации, в том числе, нейротренажер для реабилитации людей после инсульта ReviVR и игровой нейротренажер для детей с ДЦП.

27.03.2018Отраслевой союз «Нейронет» и ВолгГТУ подписали соглашение о сотрудничестве

Отраслевой союз «Нейронет» и Волгоградский государственный технический университет договорились о сотрудничестве. Соответствующее соглашение стороны подписали 22 марта.

123242, г. Москва, Малый Конюшковский пер., д. 2, оф. 17