Фонд Haxus (известен проектами Prisma и MSQRD) и партнеры инвестировали 2 миллиона долларов в стартап Fabby. Это технология автоматического отделения объекта от фона в фото и видео, что может быть применено для решения целого ряда задач как обычных пользователей, так и профессионалов. Так, приложение первым в мире научилось автоматически заменять фон видео-селфи в режиме реального времени. Технология основана на применении нейронных сетей и реализовывается непосредственно на мобильном устройстве.
Один из популярных фонов Fabby — танцующие панды
20 декабря разработчики приложения Fabby продемонстрировали возможность изменять и удалять фон в видео-селфи напрямую на мобильном устройстве в реальном времени, чего до сих пор ни одно из приложений не делало в должном качестве.
Данная возможность открывает большие перспективы для увеличения креативности создаваемого пользователями контента, что может быть особо интересно мессенджерам и соцсетям с поддержкой видео. Есть у нее и более прикладные области использования. Например, размытие фона при важном звонке через Skype или иной видеомессенджер (не всегда домашний интерьер уместен при бизнес-переговорах). Или же внедрение в видеоредакторы, что значительно уменьшит объем работы при монтаже видео.
В основе технологии Fabby лежат продвинутые техники машинного обучения и оптимизации нейронных сетей под невысокую мощность мобильных устройств.
Технология была полностью разработана технической командой Fabby, в которую вошли трое бывших инженеров Google и чемпионы спортивного программирования.
Замена неподобающего бизнес-разговору фона – полезное применение технологии Fabby
Умеет Fabby создавать и эффекты на основе фото-селфи. В отличие от других известных проектов в этой области, технология Fabby выделяет человека на снимке и обрабатывает только фон изображения. Это дает возможность пользователям как создавать забавный контент для, скажем, Instagram, так и превращать свои любительские фото в профессионально выглядящие благодаря эффекту размытия заднего плана (эффект Боке). Однако, в сравнении с эффектом Боке, представленным в последней модели айфон, размытие фона в Fabby максимально приближено к снимкам, сделанным профессиональной фотокамерой.
Эффект Боке в исполнении Fabby
В ближайших планах команды — внедрение в Fabby видео в формате 360° и возможности добавления собственных видео-фонов.
Fabby – молодой проект, первая версия его появилась в начале декабря. Поэтому пока приложение доступно для iOS устройств, а версия с обработкой видеоселфи поддерживается на айфонах серии 6 и выше. Выпуск Fabby для Android планируется в ближайшие несколько месяцев.
Несмотря на то, что Fabby вышло лишь пару недель назад, его прорывная технология высоко оценена профессионалами. В том числе и компанией Apple. 22 декабря Fabby было отмечено (“получило фичеринг”) в категории Выбор Редакции в ряде стран включая Россию, а 27 декабря попало в подборку “Новый Год — новые фавориты” в App Store США.
