Sabe o que é melhor do que ter umas horas (ou mais) para viciar o seu jogo favorito? Jogar e lanchar entre e durante jogo e jogo. Sim, José Miguel, tens uma vida e não passas as tuas horas em frente ao computador a jogar ‘WoW’ e a comer Doritos, mas alguns de nós apreciamos estes pequenos prazeres da vida.
Por fim, voltando ao assunto. Qual é o problema de lanchar enquanto você joga? Que seus dedos fiquem gordurosos e com coceira (a menos que você coma uma pêra, isso é bom, não é normal) e, claro, que seus companheiros de esquadrão certamente querem saber onde você mora para que possam lhe dizer de uma forma muito respeitosa que pare de comer batata enquanto fala no Discord.
E como resolvemos esse problema? Como podemos fazer com que as pessoas continuem comendo Doritos enquanto jogam ‘Warzone 2.0’ sem que o chat de voz fique confuso? ñams, cracks, crunchs e outros sons ao mastigar? Bem, Doritos teve uma ideia: um sistema baseado em inteligência artificial chamado Cancelamento do Doritos Crunch. E sim, nós tentamos.
Primeiras coisas primeiro: como funciona o filtro anti-doritos
Antes de colocar essa tecnologia à prova, vale a pena rever como ela funciona. Grosso modo, uma inteligência artificial precisa de muita informação para aprender a fazer algo. Por exemplo, digamos que queremos ensinar uma IA a desenhar uma árvore. Como fazemos? Nós o treinamos com milhares e milhares e milhares de imagens de árvores para que você saiba o que é uma árvore, qual é a sua estrutura, etc. Insisto, isto é em termos muito gerais, a realidade é muito mais complexa.
Bem, é o mesmo com os sons. Se queremos que a IA saiba detectar e, neste caso, filtrar um som tão característico como o crack ao comer Doritos, “simplesmente” temos que expô-lo a quantos mais rachaduras diferentes, melhor. É, mais ou menos, o que a Doritos e a Glassworks têm feito através do seu departamento Glassworks Labs para desenvolver esta, no mínimo, curiosa funcionalidade que ainda faz parte de uma campanha publicitária idealizada pela agência TWBA.
Para desenvolver o software, Doritos pediu aos usuários que enviassem vídeos ou áudios comendo Doritos (o chamado “Crunch Casting”). Com esses clipes (e mais alguma coisa, como veremos em breve), Vidrarias (empresa por trás dessa tecnologia) ficou responsável pelo desenvolvimento do sistema. O desenvolvimento levou quatro meses e uma biblioteca NVIDIA foi usada como base: Maxine.
Captura de software de PC.
O software pode ser baixado gratuitamente no site da Doritos após o preenchimento de um formulário. É compatível apenas com Windows 10/11 e requer uma placa de vídeo NVIDIA RTX 20 ou 30 para funcionar. Uma barreira de entrada, sem dúvida, mas por uma razão simples: Biblioteca Maxine da NVIDIA.
Como nos explicam Xavi Tribó (Diretor de Tecnologia da Glassworks) e Clara Titos (Produtora da Glassworks), o software desenvolvido para a Doritos é baseado na biblioteca NVIDIA Maxine, cujo SDK é compatível com as arquiteturas Turing, Ampere e Ada. Embora seja verdade que crepitações enviadas pelo usuário foram usadas para treinar o modelo, a maior parte da mágica cai nas mãos do NVIDIA SDK. Se o nome de Maxine soa familiar, pode ser porque você usou o NVIDIA Broadcast, já que ele usa a mesma biblioteca.
Grande parte da mágica acontece graças à biblioteca Maxine da NVIDIA.
Basicamente, o software executa a inteligência artificial em tempo real com um atraso de 25 milissegundos, algo que a Glassworks garante ser insignificante em uso. O software coleta 1.000 amostras de áudio por segundo e as envia para o gráfico, que é responsável por executar os algoritmos em tempo real. Os gráficos usam o Tensor Core para esse processo (e não exatamente baixo), portanto, é necessário um gráfico da série NVIDIA 20 ou 30. O RTX 40 também deve funcionar, mas é mais recente.
E agora que conhecemos melhor o sistema, é hora da parte divertida: comer Doritos e, já agora, merendar veja se funciona com outras batatas.
Doritos, outros petiscos e inteligência artificial, à prova
Para testar a tecnologia Doritos, fiz um teste bastante simples: uma degustação ao vivo. Para animar o dia, abri um pacote de Doritos, um Ham Ruffles e alguns Gang Cheetospara que possamos ver como a IA se comporta em diferentes situações.
O software que usamos para capturar imagem e som é o OBS. O sistema funciona através de um cabo virtual que é instalado no processo de instalação principal. Simplesmente você deve selecionar entrada de cabo como dispositivo de entrada. Dito isso, aqui está o resultado (aliás, já estão seguindo a gente na Twitch?). Durante o vídeo, você pode ver quando e quais batatas estou comendo e como o software se comporta conforme o configuramos.
Como podemos verificar, o software funciona surpreendentemente bem independentemente dos lanches que comemos porque, como vimos anteriormente, não se trata de ter treinado o modelo única e exclusivamente com sons Doritos, mas sim a biblioteca NVIDIA Maxine é capaz de ir muito mais longe.
Na verdade, ele cancela não apenas mastigar ao comer, mas também bater palmas, estalar os dedos, etc. A coisa é este mesmo resultado pode ser alcançado com NVIDIA Broadcast porque, lembremos, ele usa a mesma biblioteca do software Doritos. Teremos que esperar para ver se este projeto tem mais continuidade e se há mais versões ou implementações, mas o que está claro é que funciona, funciona.
Tem suas coisas, obviamente: o software não é perfeito. Se falamos ao mesmo tempo que fazemos barulhos altos, nossa voz tende a ser mais metálica ou até mesmo mal ouvida.
Além da curiosidade do software, o que realmente chama a atenção é o avanço que a tecnologia de inteligência artificial está tendo em tempo real. Não é mais apenas que é possível cancelar o ruído com um atraso inexistente, mas Maxine é capaz, por exemplo, de corrigir nossos olhos durante as videochamadas. Até onde essa tecnologia irá? Não sabemos, mas o certo é que guarda coisas muito interessantes para nós.
PS: Deixo uma ideia gratuita para os desenvolvedores: desenvolver um software capaz de eliminar o ofuscamento causado por holofotes em óculos em tempo real. Atenciosamente: alguém que TikToks e streams e está cansado de ter um brilho verde no rosto o tempo todo.
