Este ano, houve muita discussão sobre a ideia de que agentes de IA podem concluir pesquisas instantaneamente e operar como respondentes autônomos. Essas afirmações atraíram atenção, mas não condizem com o que de fato ocorreu em ambientes reais de pesquisa.
Em nossos próprios testes, as limitações ficaram claras. Os sistemas de IA podem gerar texto e imitar a linguagem humana, mas isso é muito diferente de navegar com segurança em uma pesquisa ao vivo. Eles têm dificuldades com redirecionamentos, navegação no navegador, lógica da pesquisa e interfaces interativas ou dinâmicas. A estrutura falha porque os agentes de IA são incapazes de navegar em um navegador ou responder a perguntas da pesquisa com a mesma fluidez que um respondente humano. Observamos um caso em que uma pesquisa de 10 minutos exigiu que um agente de IA a concluísse em quase 30 minutos, necessitando de intervenção manual de um humano para que continuasse.
A IA não está “conduzindo” uma pesquisa do início ao fim. O único padrão que observamos é o envolvimento parcial: um humano inicia a pesquisa e, em seguida, transfere o controle para uma ferramenta de IA em seções específicas ou a utiliza para auxiliar em tarefas. A IA não consegue passar pelas perguntas de triagem; portanto, um fraudador participará de uma triagem, entrará na pesquisa e, em seguida, transferirá o controle para um agente de IA. O comportamento ativo ocorre posteriormente e é perceptível pela quebra na continuidade em nível de dispositivo.
O PureScore™ 5.0 monitora a jornada do respondente e identifica quaisquer mudanças que possam indicar a presença de IA. A ideia é que o mesmo dispositivo, ou seja, o mesmo respondente, permaneça consistente desde o ambiente de mercado até a pesquisa de satisfação do comprador. A evidência mais clara que observamos nos dados, que levanta suspeitas de possível envolvimento de IA, é quando o dispositivo, a localização ou os padrões de interação mudam durante a pesquisa.
Como um setor que depende fortemente de dados, precisamos entender o que a IA realmente pode fazer e o que ela não pode. A IA não consegue realizar pesquisas de forma autônoma. Golpistas podem usá-la para auxiliá-los durante a pesquisa. Agora sabemos quais nuances de comportamento observar para eliminar esse problema. O PureScore™ 5.0 monitora os sinais em nível de dispositivo em ambos os lados da pesquisa para garantir que o respondente que inicia o questionário também o conclua.
Nossa série continuará a explorar a qualidade, oferecendo uma visão mais clara sobre o que é fraude de fato e o que é apenas propaganda enganosa.
por: Mark Menig, Diretor de Produtos da PureSpectrum
