«Это сложнее, чем обучить нейросеть распознавать котика на диване». Как белорусский динозавр мотивирует детей из разных культур читать

1 комментарий
«Это сложнее, чем обучить нейросеть распознавать котика на диване». Как белорусский динозавр мотивирует детей из разных культур читать

Компания Facemetrics с главным офисом в Минске в конце зимы вывела на американский рынок свой продукт для детей и родителей Nicola ReadToPlay, в основе которого лежит технология компьютерного зрения. Приложение работает даже на бюджетных мобильных устройствах и с помощью живых эмоций персонажей и искусственного интеллекта мотивирует детей регулярно читать.

Проводник в увлекательный мир чтения — оранжевый динозавр Nicola. Легенда рассказывает, что он единственный выжил на Земле, поскольку много читал в своей пещере. Среди прочего и о том, как действовать в сильно изменяющейся обстановке планеты с неустойчивым климатом.

«Мы стараемся лучше понять ребёнка, и обучаем искусственный интеллект быть ему другом, — объясняет Михаил Бойко, CEO Facemetrics. — Наш динозавр играет вместе с ребёнком, развивает его, помогает выполнять специальные задания. Мы задействуем естественную тягу детей к новому. Если контент или книга ребёнку интересны и он вовлечён в процесс чтения, что фиксируется технологией компьютерного зрения, то любимый персонаж ребёнка в приложении (сейчас их три на выбор — Дракон, Единорог и Монстрик) быстро растёт. Детям это нравится, они делятся своими успехами с друзьями, соревнуются. Так постепенно чтение увлекает, детей захватывают всё новые истории».

По теме
Все материалы по теме

Mother of Dragons в Facemetrics — арт-лид Воля Кузьмич, кроме проектов в ИТ известная также своими победами в фестивалях рекламы и как иллюстратор детских книг. Оранжевого динозавра придумала она и теперь развивает и оживляет линию героев второго плана. 

«Когда мне сказали: приходи к нам, мы делаем приложение с уникальной технологией, которое будет мотивировать детей читать больше, было трудно устоять, — рассказывает Воля. — Сказочные персонажи — это универсальный язык коммуникаций с детьми из разных культур. Такой была задумка в самом начале. Приятно, когда ожидания совпадают с фидбеком. Теперь оранжевому динозавру пишут письма поклонники из Китая и США — где купить? А продаётся пока только подписка на расширенные функции приложения Nicola ReadToPlay.

В Facemetrics мы используем технологию Lottie для анимации персонажей в приложении — это вызов для аниматора и художника, поскольку библиотека гибкая, мультиплатформенная и удобная для разработчиков, однако имеет много ограничений в эффектах, к которым так привыкаешь, рисуя рекламные ролики в After Effects».


Facemetrics была организована в начале 2018 года в Минске и сегодня разрабатывает несколько мобильных приложений. Компания тесно сотрудничает с Banuba Development, на Face AR SDK которой работает ReadToPlay, а также активно развивает собственные технологии. В совместном портфолио компаний такие вещи, как определение позы, трекинг глаз и определение эмоций человека камерой телефона.


«Самое сложное в практической реализации технологий компьютерного зрения — сделать такой алгоритм, который бы стабильно работал не только на флагманских устройствах, — рассказывает Денис Пирштук, руководитель отдела Data Science в Facemetrics, победитель международных олимпиад по математике и известный в Беларуси эксперт по big data. — Сложность задач, которые мы решаем, связана с проблемами когнитивных наук: в психологии трудно найти экспертов, которые озвучат одно и то же мнение. А наше приложение определяет, когда ребенок недостаточно сосредоточен на чтении — это сложнее, чем обучить нейросеть распознавать котика на диване».

Большое значения в проектах в области компьютерного зрения всегда уделяется приватности данных. Согласие на сбор данных должно быть подтверждено конклюдентным действием.

«В нашей области это не так просто, — объясняет Денис. — Например, в неконтролируемых условиях собрать данные о направлении взгляда нельзя. Поэтому некоторые компоненты наших алгоритмов обучаются на сгенерированных в 3D-редакторах картинках». 

Именно на задаче определения взгляда человека исследователи из Apple в 2016 году продемонстрировали эффективность использования генеративно-состязательных нейронных сетей для улучшения датасета.

Отслеживание положения лица и взгляда с высокой точностью и низкой вычислительной сложностью является сложным вызовом. Алгоритм ReadToPlay достаточно устойчив и при работе с потоком в 10 кадров — это сберегает заряд и предотвращает нагрев устройства.

«Попытки жёстко ограничить экранное время ребёнка очень неэффективны. Чем больше что-то детям запрещаешь, тем больше им этого хочется. Поэтому мы верим в новые технологии, контент и UX, принципиально меняющие способы и цели взаимодействия „ребенок-компьютер“. Надеемся, что наши алгоритмы и продукты позволят сделать использование детьми абсолютно любых электронных устройств безопаснее и полезнее», —  рассуждает Денис Пирштук.

Самыми первыми тестировщиками Nicola ReadToPlay были дети сотрудников компании. Каждый день наблюдая за их взаимодействием с большим количеством мобильных устройств, в Facemetrics и придумали концепцию проекта Readtoplay.

«Наше решение состоит в том, чтобы предоставить родителям инструмент, который в идеале не только сам проследит за тем, чтобы ребенок соблюдал меру, но и станет помощником родителя в вопросах воспитания и образования ребёнка, — считает CTO Facemetrics Олег Орёл. — Мне повезло: я могу участвовать в разработке продукта одновременно и как заинтересованный пользователь — родитель, и как разработчик, и видеть проблему сразу с обеих сторон.

Head of UX in Facemetrics Ксения Колтун анализирует первые месяцы выхода ReadToPlay на американский рынок. Разница в менталитете с Европой, в подходах к воспитанию и образованию влияет не только на промоцию продукта, но и на логику внутри приложения.

«Мы понимаем, что представления о мотивации детей на разных континентах и в разных культурах могут отличаться не только в деталях, но и в принципиальных подходах. К счастью, у нас есть сказочные персонажи. Они делают эмоции приложения ReadToPlay одинаково понятными и в Беларуси, и в США, и в Австралии», — уверена Ксения.

Для белорусов у основного продукта Facemetrics особые условия — Nicola ReadToPlay для них бесплатен, а Windows-версия приложения имеет и белорусскоязычный вариант интерфейса.

​Сегодня в Facemetrics работает около 60 человек, компания недавно расширилась на целый дополнительный этаж в бизнес-центре «Александров Пассаж» и активно ищет новых специалистов (Product Manager и Senior iOS Developer) в команду ReadToPlay и других продуктов.

Хотите сообщить важную новость?

Пишите в наш Телеграм

Читайте также

На чём можно было заработать до 104% в 2019 году. Топ активов и акций
На чём можно было заработать до 104% в 2019 году. Топ активов и акций

На чём можно было заработать до 104% в 2019 году. Топ активов и акций

Торговый конфликт США с Китаем и замедление темпов роста мировой экономики сдерживали рынки на протяжении всего 2018 года. Однако заморозка конфликта и смягчение монетарной политики стран, призванной стимулировать мировую экономику, подтолкнули фондовые, сырьевые и альтернативные рынки к росту. В итоге 2019-й стал одним из самых доходных для инвесторов за последние годы.
6 комментариев
«При потолке в $2K мужчина попросит $1,9K, а женщина — $1,6K». Стартапер из Армении о равенстве полов и сексизме
«При потолке в $2K мужчина попросит $1,9K, а женщина — $1,6K». Стартапер из Армении о равенстве полов и сексизме

«При потолке в $2K мужчина попросит $1,9K, а женщина — $1,6K». Стартапер из Армении о равенстве полов и сексизме

Соосновательница двух армянских стартапов — ERP Smart System и Cardy — Роза Беджанян впервые приехала в Минск летом прошлого года для участия в конференции Emerge. Теперь благодаря друзьям и бизнес-проектам она бывает здесь регулярно. Роза — одна из тех, кто разрушает гендерные стереотипы: родом из маленького городка на севере Армении, в 16 лет уехала в Ереван и, ослушавшись маму, подала документы в политех на традиционно мужскую специальность — «микроэлектронику». Мама может быть рада такому исходу: первой мечтой дочки было стать военным пилотом, но в Военно-авиационный университет девушек тогда ещё не брали (с 2013 года уже берут). К 28 годам у Розы за плечами работа в четырёх международных ИТ-компаниях, в том числе в Кремниевой долине и Брюсселе, преподавание в университете, а также создание двух собственных проектов. Впереди — большие планы на учёбу, бизнес и семью. dev.by поговорил с Розой о том, тяжело ли девушке руководить компанией и как влияют гендерные правила на карьеру и личную жизнь.
1 комментарий
Бесплатные курсы от Wargaming впервые набирают гейм-дата аналитиков
Бесплатные курсы от Wargaming впервые набирают гейм-дата аналитиков

Бесплатные курсы от Wargaming впервые набирают гейм-дата аналитиков

IaaS на примере квартирного ремонта. Что лучше сделать самому, а что купить у поставщика услуг
IaaS на примере квартирного ремонта. Что лучше сделать самому, а что купить у поставщика услуг

IaaS на примере квартирного ремонта. Что лучше сделать самому, а что купить у поставщика услуг

Обсуждение

2

Классные иллюстрации!

Спасибо! 

Получать рассылки dev.by про белорусское ИТ

Что-то пошло не так. Попробуйте позже