Medal, uma startup mais conhecida por seu produto de recorte de vídeo de jogos, acaba de anunciar que arrecadou $13 milhões a uma avaliação de $333 milhões de vários investidores, incluindo Horizons Ventures, OMERS Ventures, peak6 e Arcadia Investment Partners.

A empresa também lançou o Highlight, um novo aplicativo para desktop multiplataforma que atua como assistente de IA contextual para os usuários. O aplicativo captura o conteúdo na tela e permite que você faça perguntas a um Modelo de Linguagem Grande (LLM) com base nesse contexto.

Henry Gladwyn, um investidor da OMERS Ventures, disse ao TechCrunch em uma ligação que a empresa de investimento viu uma oportunidade de usar a tecnologia principal da Medal e aplicá-la aos LLMs.

Gladwyn acrescentou que via a Medal como um produto para gravar os melhores momentos da vida virtual, em vez de apenas uma empresa de jogos. E o aplicativo Highlight é uma extensão natural desse paradigma.

Como funciona o Highlight?

Ao longo dos anos, as empresas tentaram criar um assistente útil para os usuários que utiliza informações na tela. O Google tem tentado há anos com o Google Now, Google Assistant e agora o Gemini. A Apple fez uma incursão nesta área quando lançou o Apple Intelligence e sua capacidade de entender informações contextuais na tela no mês passado em sua Conferência Mundial de Desenvolvedores (WWDC). A Microsoft também está alavancando a IA generativa com o Windows Recall, uma funcionalidade que ajuda os usuários a encontrar conteúdo que visualizaram no passado - após o anúncio inicial, a Microsoft decidiu adiar o lançamento do Recall.

O Highlight está tentando fazer isso para o desktop. Na iteração atual, o aplicativo aparece como um botão flutuante em sua área de trabalho. Sempre que você passar o mouse sobre o ícone, ele captura o conteúdo na tela e passa como contexto para diferentes modelos. Você pode escolher fazer outras perguntas usando diferentes ferramentas como ChatGPT, Claude da Anthropic, Perplexity e mais.

Com base em diferentes modelos, o aplicativo pré-preenche algumas das perguntas para ajudá-lo a começar. A captura acontece localmente e o aplicativo não armazena nenhum conteúdo. A empresa está construindo seu próprio assistente semelhante ao ChatGPT, que pode ser menos capaz do que os modelos baseados na nuvem para algumas tarefas - mas este assistente poderá eventualmente ser executado localmente em seu dispositivo.

Além do conteúdo na tela, você também pode passar um documento e memória de áudio do sistema como contexto para o Highlight. Para utilizar o caso de uso de áudio, a empresa está construindo um aplicativo local de transcrição para reuniões semelhante a ferramentas como Granola, Limitless e Krisp.

Construindo o Highlight

Pim de Witte, um dos cofundadores da Medal, disse ao TechCrunch em uma ligação que a empresa começou a pensar em como poderia usar a tecnologia de captura de clipes do Medal.tv e combiná-la com IA no ano passado.

Ele também mencionou que queria fazer um aplicativo de IA que pudesse ser usado por pessoas de todas as idades, mesmo que não estejam familiarizadas com a tecnologia. Por isso, o aplicativo mostrará sugestões de prompts contextuais com base na captura.

A empresa também está construindo uma plataforma aberta para desenvolvedores implantarem seus próprios aplicativos na plataforma do Highlight. Isso é um pouco equivalente ao aplicativo lançador Raycast para Mac, que permite instalar extensões feitas por desenvolvedores. No entanto, uma diferença fundamental é que o Highlight está disponível tanto no Mac quanto no Windows.

Gladwyn da OMERS Ventures disse que, como o Highlight é independente e não tem interesse em prendê-lo a um ecossistema, ele possui uma vantagem.

O caminho à frente

O Medal.tv é um produto de sucesso e a empresa quer continuar apoiando-o e adicionando novos recursos. No entanto, a empresa destinará parte de sua equipe para trabalhar no Highlight.

O Highlight é gratuito por enquanto, mas de Witte quer monetizá-lo com o modelo de loja de aplicativos. A startup também está explorando uma assinatura premium para fornecer acesso a alguns de seus próprios aplicativos e recursos como modelos locais em primeiro lugar.

A empresa também está distribuindo subsídios de até $30.000 para desenvolvedores que também terão acesso à equipe do Highlight para desenvolver o ecossistema de aplicativos.