Médicos com IA conversacional obtêm 2.83 contra 2.46 na validade das respostas: experimento randomizado com vinhetas na América Latina

PreprintmedRxiv 2026 · 1 min de leitura
Validade das respostas em 3
2.83
Mediana com apoio de IA contra 2.46 com a busca habitual; P < .001
Odds ratio · atingir o limiar de validade
3.61
Ajustado pela titulação acadêmica; IC 95% 1.16–11.17
Médicos analisados
71
26 com apoio de IA e 45 com a busca habitual; 1,136 respostas

Preprint medRxiv: 71 médicos latino-americanos responderam a vinhetas clínicas; com IA, a validade mediana subiu para 2.83/3 contra 2.46 (OR 3.61).

Médicos da América Latina foram randomizados para responder a quatro casos clínicos simulados, cada um com quatro perguntas abertas, com o apoio de um sistema de IA conversacional com evidências rastreáveis ou com sua forma habitual de buscar informação. Dois especialistas cegos por área avaliaram cada resposta com uma rubrica de seis dimensões, e o desfecho principal foi um escore composto de validade por médico. Dos 202 médicos que começaram, 71 concluíram o exercício e foram analisados (26 com apoio e 45 com a prática habitual), totalizando 1,136 respostas.

Os médicos com apoio tiveram escores mais altos, com mediana de 2.83 contra 2.46 em 3 (diferença 0.38; IC 95% 0.17 a 0.54; P < .001), e maior probabilidade de atingir o limiar de validade após ajuste pela titulação acadêmica (odds ratio 3.61; IC 95% 1.16 a 11.17). O efeito se manteve nos quatro critérios com maior concordância entre avaliadores, mas não na exatidão isolada, que um avaliador externo também considerou não significativa; o tempo de resposta e as buscas não diferiram, e a aceitabilidade foi alta (2.92 de 3). A amostra é composta por voluntários que concluíram o exercício, por isso os autores consideram os achados exploratórios; trata-se de um preprint ainda não revisado por pares.

Resultados em resumo

Os números principais do artigo, em linguagem simples.

MétricaValorO que significa
Validade das respostas em 32.83Mediana com apoio de IA contra 2.46 com a busca habitual; P < .001
Odds ratio · atingir o limiar de validade3.61Ajustado pela titulação acadêmica; IC 95% 1.16–11.17
Médicos analisados7126 com apoio de IA e 45 com a busca habitual; 1,136 respostas

Como citar

Natalia Castaño-Villegas, Katherine Monsalve, María Camila Villa, Oscar Iván Quirós Gómez, Laura Velásquez, Jose Zea. Quality of physicians’ responses using a conversational artificial intelligence system: a randomized vignette experiment in Latin America. medRxiv. 2026. https://doi.org/10.64898/2026.09.23.26363806

@article{castanovillegas2026quality,
  title     = {{Quality of physicians’ responses using a conversational artificial intelligence system: a randomized vignette experiment in Latin America}},
  author    = {Natalia Castaño-Villegas and Katherine Monsalve and María Camila Villa and Oscar Iván Quirós Gómez and Laura Velásquez and Jose Zea},
  journal   = {medRxiv},
  year      = {2026},
  doi       = {10.64898/2026.09.23.26363806},
  url       = {https://doi.org/10.64898/2026.09.23.26363806},
  note      = {Preprint}
}

Mais pesquisas da Arkangel AI

Todas as pesquisas →

Para hospitais e operadoras

Valide estes resultados na sua instituição

Testamos o modelo com os seus próprios prontuários e a sua equipe, sob as suas regras de privacidade e governança.

Iniciar uma parceria
Ler artigoCitar