Rumaro – AI, чтобы узнать эмоции, одежду, позу тела и активность в изображениях
Rumaro использует AI для признания эмоций, одежды, позы тела и активности в изображениях, а также измеряет, как они влияют на участие аудитории. т.е. Любит и комментарии.
Проверьте это на GitHub.
Это началось как один из моих уездов на выходные и изначально предназначался, чтобы быть запущены в качестве платной SaaS. Но при исследовании больше о проблемах конфиденциальности, Instagrams ограничивает apis и смешанные результаты от первоначальных тестов, я решил ловить идею и просто открыть исходный код вместо этого.
Настраивать
- Настройка MS Cognitive Services API Ключи API, DeepFashion и учет Instagram
- Установите зависимости
PIP Установка -R требования. atxt - Запустите фактический анализ
python run_rumaro.py --instagram_id
Здесь приходит сложная часть, теперь возьмите вашу пару отладки очков и начну копаться вокруг различного свойства data_groomer объект для чего-то полезного. Я просто Ваай, чтобы собрать, чтобы добавить графики и пользовательские интерфейсы к этому сейчас.
Почему?
С Румаро я пытался определить что Действительно сделали фотографии особенными! 🦄
Я предположил, что – фотографии, которые понравились пользователю, то есть фотографии, которые были более желательными, могут быть идентифицированы с использованием AI модели и ключ Особенности что сделало их специальными, могут быть определены таким образом.
Я думал, что рационер, поза тела и Одельная одежда может быть легко идентифицирована с использованием глубокого обучения, и они будут Только Особенности, которые будут за рулем участие в социальных сетях.
Как?
Контур
Все сообщения Instagram, которые будут проанализированы, будут загружены, то они будут отправлены нескольким моделям глубоких учебных средств для создания от них понимания, чтобы узнать, что делает их особенными.
Шаги
- Почта Instagram вырвала и публичный URL изображения хранится
- Он отправляется в Microsoft Vision API, чтобы быть классифицированным в декорации/другое изображение, полное изображение/представление или портрет или селфи.
- Если изображение является пейзажем, он не отправляется на любой дальнейший анализ
- Изображения позы тела отправляются в модель обнаружения позе, работающей на OpenCV, а затем в API DeepFashion от алгоритмии для обнаружения одежды.
- Портреты или посты Selfie отправляются в API Microsoft Emotion.
- Все Insights затем хранятся в БД, и пользователь перенаправляется на страницу оплаты
- Покажите пользователю Отверенный анализ своего профиля.
Да! Я даже начал страницу Instagram и попытался найти целевую аудиторию – влияние, которые на самом деле были готовы платить за использование продукта
Зрение
Видение состояло в том, чтобы создать огромную компанию SaaS, которая обвинила людей ~ 10 $ за рассмотрение профиля. Я предполагал, что было бы возможно создать устойчивый бизнес из этого.
У меня было видение, что созреваемые идеи будут настолько полезны, чтобы позволить пользователям значительно повысить свои профили в социальных сетях, и я представлял, что моделями глубоких учебных средств будут супер-точными и предсказывают все как реальные люди воспринимают его.
Как далеко я на самом деле получил?
- Я успешно удалось создать хорошо выглядеть интерфейсы, используя Materizecs, с колбой на бэкэнде.
- Мне удалось создать основные компоненты AI проекта – разговаривать со всеми API, глубокому обучению
- Мне удалось создать добавить аутентификацию и базы данных к нему.
Я решил, что имел в виду только смысл опубликовать разбитую версию всей кодовой базы, без веб-фреймой кода и пакетов колба.
Скриншоты
Сгенерированный отчет после анализа случайной учетной записи Instagram. Да, мне пришлось цензуру всех изображений, да, что вроде «побеждает всю цель скриншотов 🤷 🏽♂. ️
Статистика, сгенерированная после анализа случайный профиль Instagram
⚓ спрыгивать от тонущего корабля …
К сожалению, когда я продвинулся вперед с проектом, я обнаружил, что корреляция между различными особенностями и взаимодействием была очень слабой. Кроме того, этот проект имел кошмарные проблемы конфиденциальности, которые сделали его чрезвычайно сложными для монетизации и рынка.
В ретроспективе, кажется, очевидно, что план был немного ошибочным из квадратного. 🤷 🏽♂. ️
Эх … Я собирался играть с большим количеством глубоко изучения API, поэтому все было хорошо.
Обратитесь к мне!
Если вы заинтересованы построить что-то похожее на себя или хотете бы помочь получить это и запустить или если вы Планирование превратить это в фильм !!! Ударил меня на Google Hangouts в RohansawantCT83@gmail.com
Оригинал: “https://dev.to/rohansawant/failed-rumaro-an-ai-to-recognize-emotions-apparel-body-pose-and-activity-in-images-on-instagram-1ok5”