Недавно, у нас состоялся Хакатон на тему «Использование генеративных нейросетей в вашей работе». Рассказываем о приложении победителе — Summarizer!
Основная идея приложения – облегчить жизнь людям, кто часто и много обсуждает голосом. Порой встречи стоят вплотную или даже накладываются друг на другу. В таком ритме, сложно не потерять контекст и не забыть о договоренностях во время предыдущего звонка. Приложение Summarizer помогает в решении этой проблемы:
- Вы можете загрузить записи своих встреч в видео или аудио форматах, получив запись обсуждений в текстовом виде с разбиением по человеку кто говорил.
- Приложение предоставляет информацию о теме вашего обсуждения в нескольких представлениях, что позволяет посмотреть на информацию с разных точек зрения: саммари обсуждения, эмоциональный фон из динамика разговора.
Summarizer превосходит простую транскрипцию. Оно предоставляет различные типы информации об участниках разговора, таких как идентификация ключевых тем разговора, извлечение важных фактов и категоризация контента. В будущем алгоритмы приложения смогут анализировать текст и предлагать ценные идеи прямо во время разговора.
Кроме того, анализ эмоционального состояния говорящих может быть полезен в важных переговорах и обсуждениях, чтобы дать возможность отреагировать незамедлительно и скорректировать свою позицию или идеи.
Так же если такую информацию анонимизировать и собирать, она может быть полезна создателя контента, исследователям или любого, кто заинтересован в понимании эмоциональной окраски слов.
Используемые технологии:
- OpenAI’s Whisper (автоматизация распознавание речи)
- .NET Multi-platform App UI
- GPT-3.5 API
- BlackHole (библиотека для обработки звука)
- LLaMA model
- ECAPA-TDNN
По мере того как мы внедряем ИИ в повседневную жизнь, приложения, такие как Summarizer, предлагают взгляд в будущее обработки и понимания информации. Мы верим, что ИИ можем помочь достичь новых уровней продуктивности и эффективности. Захватывающе представить себе мир, где сложные задачи упрощаются, а информация доступна всем.
