EADC: Evaluation of Advanced and Deep-level Compliance in Large Language Models

arXiv cs.AI · 23 sept, 06:00

Investigadores presentan EADC, un marco de evaluación de cumplimiento normativo en LLMs que utiliza grafos de conocimiento sobre regulaciones de IA y expertos legales. El benchmark de 4.435+ pares de preguntas-respuestas va más allá de los evaluadores estáticos tradicionales al detectar riesgos implícitos y covert en áreas como sesgo, privacidad y valores, exponiendo puntos ciegos regulatorios en modelos de lenguaje actuales.