Улучшение поиска по каталогу картинок с помощью Machine Learning

Картинка из описания сервиса Microsoft Face API

Возьмем каталог картинок, можно с подписями, можно без (instagram, tinder, craigslist, avito etc.).

В процессе поиска пользователь обращает внимание на определенные паттерны в картинках (например, велосипед - спортивный, девушка - блондинка и т.п.). Хорошо, если при публикации картинки было дано ее словесное описание (пример: хеш-теги в инстаграме). Если нет,  можно использовать библиотеки Machine Learning, умеющие размечать семантические атрибуты изображений - image recognition, реализованная в TensorFlow и др. библиотеках). По сути, это будет набор нейросеток, каждая из которых распознает какой-то свой паттерн для картинки. Некоторые сетки еще не дают заданной точности, но это дело ближайшего времени. Силовые ведомства уже давно трудятся над чем-то подобным для опознавания лиц подозреваемых.

Есть несколько возможных способов поиска (от простого к сложному).

( Read more... )

My tweets

• Sat, 21:16: Бизнес-идея для Тиндера: научиться предсказывать кого пользователь лайкнет на основе предыдущих лайков и показывать… https://t.co/HPTf7vU4X2
• Sat, 21:45: Кто-нибудь еще летает во сне?