Medal привлекает $13 млн на развитие контекстного ИИ-ассистента для настольных ПК


Приложение Highlight от Medal. Контекстный ИИ-ассистент, который анализирует содержимое экрана.

Компания Medal, более известная своим продуктом для записи видео из игр, недавно объявила о привлечении $13 млн при оценке в $333 млн от ряда инвесторов, включая Horizons Ventures, OMERS Ventures, Peak6 и Arcadia Investment Partners.

Компания также представила Highlight, новое кросс-платформенное настольное приложение, которое действует как контекстный ИИ-ассистент для пользователей. Приложение захватывает содержимое экрана и позволяет задавать вопросы крупной языковой модели (LLM) на основе этого контекста.

Генри Глэдвин, партнер в OMERS Ventures, сообщил TechCrunch в ходе телефонного разговора, что венчурная компания увидела возможность использовать основную технологию Medal и применить её к LLM.

«Основная технология Medal основана на понимании того, что происходит на устройстве пользователя, будь то видео, аудио или другие события. Изначально это использовалось для записи видео. Теперь компания применяет эту технологию к LLM для создания подсказок, что является умным использованием», — сказал Глэдвин.

Глэдвин добавил, что он видит Medal как продукт для записи лучших моментов виртуальной жизни, а не только как игровую компанию. И приложение Highlight является естественным продолжением этой парадигмы.

Как работает Highlight?

На протяжении многих лет компании пытались создать полезного ассистента для пользователей, который использует информацию с экрана. Google долгое время работал над Google Now, Google Assistant и теперь Gemini. Apple сделала шаг в этом направлении, запустив Apple Intelligence и её способность понимать контекстную информацию на экране в прошлом месяце на Всемирной конференции разработчиков (WWDC). Microsoft также использует генеративный ИИ с функцией Windows Recall, которая помогает пользователям находить контент, просмотренный ранее — после первоначального анонса Microsoft решила отложить запуск Recall.

Highlight пытается сделать это для настольных ПК. В текущей версии приложение находится в виде плавающей кнопки на рабочем столе. Когда вы наводите курсор на значок, оно захватывает содержимое экрана и передает его как контекст для разных моделей. Вы можете задавать вопросы, используя различные инструменты, такие как ChatGPT, Claude от Anthropic, Perplexity и другие.

В зависимости от модели приложение предлагает несколько предзаполненных вопросов, чтобы помочь вам начать. Захват происходит локально, и приложение не сохраняет контент. Компания разрабатывает собственного ассистента, подобного ChatGPT, который может быть менее способен в некоторых задачах, чем облачные модели, но этот ассистент сможет работать локально на вашем устройстве.

Кроме контента на экране, вы можете передавать Highlight документ и системную аудиопамять как контекст. Для использования аудио компания разрабатывает локальное приложение для транскрипции встреч, аналогичное инструментам, таким как Granola, Limitless и Krisp.

Создание Highlight

Пим де Витте, один из соучредителей Medal, сообщил TechCrunch в телефонном разговоре, что компания начала думать в прошлом году о том, как они могут использовать технологию захвата клипов Medal.tv и объединить её с ИИ.

«Мы знаем, что запись действий будет важна для операционных систем. Мы видим, как некоторые крупные технологические компании делают такие шаги. Мы хотим предоставить открытую платформу, чтобы связать пользователей с ассистентами, моделями и интерфейсами,» — сказал де Витте.

Он также отметил, что хочет создать ИИ-приложение, которое могли бы использовать люди всех возрастов, даже если они не знакомы с технологией. Именно поэтому приложение будет предлагать контекстные подсказки на основе захваченного контента.

Компания также разрабатывает открытую платформу для разработчиков, чтобы те могли развертывать свои приложения на платформе Highlight. Это несколько похоже на приложение Raycast для Mac, которое позволяет устанавливать расширения, созданные разработчиками. Однако ключевое отличие заключается в том, что Highlight доступен как на Mac, так и на Windows.

Глэдвин из OMERS Ventures отметил, что благодаря независимости Highlight и отсутствию интереса к вовлечению вас в одну экосистему, у приложения есть преимущество.

Будущее развитие

Medal.tv является успешным продуктом, и компания планирует продолжать его поддерживать и добавлять новые функции. Однако часть команды будет работать над Highlight.

Highlight пока бесплатен, но де Витте планирует монетизировать его по модели магазина приложений. Стартап также рассматривает возможность внедрения премиальной подписки для доступа к некоторым своим приложениям и функциям, таким как локальные модели.

Компания также предоставляет гранты до $30,000 для разработчиков, которые также получат доступ к команде Highlight для развития экосистемы приложений.