Google выпустила алгоритм для резюмирования текста

Оставить комментарий
Google выпустила алгоритм для резюмирования текста

Команда Google Brain выпустила алгоритм SummAE AI, который не просто делает выборку предложений заданного текста, а перефразирует фрагмент «своими словами», пишет VentureBeat.

Система SummAE работает без контроля или при минимальном участии человека и способна извлекать краткое содержание из текстов объёмом в 5 предложений. По словам исследователей, качество сделанных ею резюме значительно лучше, чем у существующих аналогов.

SummAE состоит из шумоподавляющего автокодировщика, который кодирует предложения и абзацы целевого текста, и декодера. Всего было обучено три версии SummAE на датасете ROCStories, состоящем из более чем 98 тысяч текстовых фрагментов для обучения, валидации и тестирования нейросетей. Также было подготовлено по 3 аннотации, сделанных человеком, для 1 тысячи валидационных и тестовых примеров.

Для оценки качества аннотаций нейросети использовались метрики ROUGE (Recall-Oriented Understudy for Gisting Evaluation). Лучшая из обученных моделей значительно превзошла эталонный генератор, а сотрудники Amazon Mechanical Turk оценили результаты одной из них как естественные и содержательные в 80 процентах случаев.

Исходный код системы SummAE вместе с конфигурациями доступен на GitHub.

​Подписывайтесь на наш телеграм-канал.

Главные новости за день — максимально коротко.

Хотите сообщить важную новость?

Пишите в наш Телеграм

Читайте также

В Англии спущен на воду автономный корабль под управлением AI
В Англии спущен на воду автономный корабль под управлением AI
В Англии спущен на воду автономный корабль под управлением AI
3 комментария
Китай составил «черный список» технологий на экспорт
Китай составил «черный список» технологий на экспорт
Китай составил «черный список» технологий на экспорт
В Гарварде создали AI для прогнозирования, как лекарства влияют на продолжительность жизни у мышей
В Гарварде создали AI для прогнозирования, как лекарства влияют на продолжительность жизни у мышей
В Гарварде создали AI для прогнозирования, как лекарства влияют на продолжительность жизни у мышей
1 комментарий
Как правильно считать толпу с помощью AI
Как правильно считать толпу с помощью AI
Как правильно считать толпу с помощью AI
1 комментарий

Обсуждение

Комментариев пока нет.
Спасибо! 

Получать рассылки dev.by про белорусское ИТ

Что-то пошло не так. Попробуйте позже