Google выпустила алгоритм для резюмирования текста

Оставить комментарий
Google выпустила алгоритм для резюмирования текста

Команда Google Brain выпустила алгоритм SummAE AI, который не просто делает выборку предложений заданного текста, а перефразирует фрагмент «своими словами», пишет VentureBeat.

Система SummAE работает без контроля или при минимальном участии человека и способна извлекать краткое содержание из текстов объёмом в 5 предложений. По словам исследователей, качество сделанных ею резюме значительно лучше, чем у существующих аналогов.

SummAE состоит из шумоподавляющего автокодировщика, который кодирует предложения и абзацы целевого текста, и декодера. Всего было обучено три версии SummAE на датасете ROCStories, состоящем из более чем 98 тысяч текстовых фрагментов для обучения, валидации и тестирования нейросетей. Также было подготовлено по 3 аннотации, сделанных человеком, для 1 тысячи валидационных и тестовых примеров.

Для оценки качества аннотаций нейросети использовались метрики ROUGE (Recall-Oriented Understudy for Gisting Evaluation). Лучшая из обученных моделей значительно превзошла эталонный генератор, а сотрудники Amazon Mechanical Turk оценили результаты одной из них как естественные и содержательные в 80 процентах случаев.

Исходный код системы SummAE вместе с конфигурациями доступен на GitHub.

​Подписывайтесь на наш телеграм-канал.

Главные новости за день — максимально коротко.

Хотите сообщить важную новость? Пишите в Телеграм-бот.

А также подписывайтесь на наш Телеграм-канал.

Горячие события

Gismart Online Meetup
9 декабря

Gismart Online Meetup

Минск

Читайте также

В России выпустили книгу о «замене человека роботом», переведя её через онлайн-переводчик
В России выпустили книгу о «замене человека роботом», переведя её через онлайн-переводчик
В России выпустили книгу о «замене человека роботом», переведя её через онлайн-переводчик
Искусственный интеллект DeepMind решил задачу, с которой учёные не могли справиться полвека
Искусственный интеллект DeepMind решил задачу, с которой учёные не могли справиться полвека
Искусственный интеллект DeepMind решил задачу, с которой учёные не могли справиться полвека
Осторожно, поддельные Обама и Ким Чен Ын. Как создаются дипфейки и почему они опасны
Осторожно, поддельные Обама и Ким Чен Ын. Как создаются дипфейки и почему они опасны
Осторожно, поддельные Обама и Ким Чен Ын. Как создаются дипфейки и почему они опасны
Дипфейки, которые появляются благодаря AI, становится все сложнее распознать. Решили разобраться, как их используют для создания различного контента — от развлекательного до политического и к чему это приводит.
1995 — 2020: события, которые навсегда изменили ИТ-индустрию
1995 — 2020: события, которые навсегда изменили ИТ-индустрию
1995 — 2020: события, которые навсегда изменили ИТ-индустрию
Известный американский технический журнал Fast Company отмечает 25-летие. По этому поводу издание составило свой список важных событий в ИТ-сфере за четверть века, которые серьезным образом повлияли на развитие технологий. Выбрали самое интересное, некоторые пункты дополнили любопытными, на наш взгляд, фактами. 

Обсуждение

Комментариев пока нет.
Спасибо! 

Получать рассылки dev.by про белорусское ИТ

Что-то пошло не так. Попробуйте позже