🔬 Статья магистрантов ФТИИ — на международной конференции по ИИ
Иван Кирпичев и Эльдар Курманалиев с научным руководителем Анной Владимировной Калюжной собрали проверочный набор для систем, которые ищут ответ по графу знаний.
Такие системы отвечают на простой вопрос, но путаются, когда ответ надо собрать из нескольких шагов. А проверять их почти не на чем: готовые наборы собраны из данных, знакомых моделям.
Ребята построили граф пятисот крупнейших компаний США и добавили новости. Вопросы генерируются автоматически, а верный ответ вычисляет сама база, а не нейросеть. Вышло 4 000 пар «вопрос-ответ» четырёх типов сложности.
Проверка показала: поиск по тексту на аналитике почти не находит нужное, а системы на графах ломают строгую иерархию исходных данных.
Работу приняли и на доклад, и на постерную сессию семинара — он прошёл 17 августа в Бремене при Международной объединённой конференции по искусственному интеллекту (IJCAI) высшей категории.
Поздравляем ребят! 👏 Подробнее — в канале лаборатории
Иван Кирпичев и Эльдар Курманалиев с научным руководителем Анной Владимировной Калюжной собрали проверочный набор для систем, которые ищут ответ по графу знаний.
Такие системы отвечают на простой вопрос, но путаются, когда ответ надо собрать из нескольких шагов. А проверять их почти не на чем: готовые наборы собраны из данных, знакомых моделям.
Ребята построили граф пятисот крупнейших компаний США и добавили новости. Вопросы генерируются автоматически, а верный ответ вычисляет сама база, а не нейросеть. Вышло 4 000 пар «вопрос-ответ» четырёх типов сложности.
Проверка показала: поиск по тексту на аналитике почти не находит нужное, а системы на графах ломают строгую иерархию исходных данных.
Работу приняли и на доклад, и на постерную сессию семинара — он прошёл 17 августа в Бремене при Международной объединённой конференции по искусственному интеллекту (IJCAI) высшей категории.
Поздравляем ребят! 👏 Подробнее — в канале лаборатории