The Argument and the Letterhead: Source-Position Coherence in AI Evaluation

arXiv cs.AI · 29 sept, 06:00

Un estudio de evaluación de argumentos por sistemas de IA demuestra que los modelos considera la coherencia entre la fuente atribuida y la posición política del argumento, ajustando sus valoraciones según el emisor. Los investigadores presentaron textos idénticos bajo diferentes atribuciones de fuente y encontraron que las evaluaciones variaban significativamente, sugiriendo que los evaluadores de IA no separan adecuadamente la calidad del argumento de la alineación con la fuente percibida.