● NeuroSec Radar
Entrar

● Trascendental · últimas 48 h

Destacados · últimas 48 h

Últimas noticias

3235 noticias
Limpiar
5IA × Ciber✨arXiv cs.CR ·

ABF-Bench: A Verifiable Benchmark for Agentic Blockchain Forensics

Investigadores presentan ABF-Bench, un benchmark interactivo que evalúa agentes IA en la tarea de rastrear fondos en blockchains de forma verificable, citando registros públicos para cada movimiento. Construido con casos reales de lavado de dinero, combina transferencias multi-salto, intercambios DeFi, puentes entre cadenas y depósitos en servicios de custodia. El harness propuesto alcanza el 75% de exhaustividad en aristas, superando a agentes generales como Codex (47%) y Claude Code (10%), pero tiende a detenerse temprano en tareas más grandes.

#IA defensiva#Investigación
6IA × Ciber✨arXiv cs.CR ·

From Billion-Scale to Million-Scale Language Models: Operational Capabilities for Embedded Post-Exploitation

Investigadores evalúan modelos de lenguaje pequeños (SLMs) de 20 millones a 1.500 millones de parámetros en tareas ofensivas de generación de código: enumeración de directorios y generación de backdoors. Los resultados muestran que modelos compactos como Qwen2.5-Coder 1.5B logran tasas de éxito del 100% en Python y del 99,2% en Lua cuando se combinan formulaciones algorítmicas y few-shot prompting, aunque aún son demasiado exigentes computacionalmente para despliegue masivo en malware actual.

#IA ofensiva#Seguridad LLM
6IA × Ciber✨arXiv cs.CR ·

MobileInject: Evaluating Reasoning-to-Action Security of MLLM-Based Mobile Agents under Cross-Modal Consistency Injection

Investigadores presentan MobileInject, un benchmark para evaluar la seguridad de agentes móviles basados en MLLM (modelos multimodales grandes) frente a ataques de inyección cross-modal. El estudio demuestra que estos agentes autónomos son vulnerables a inyecciones de objetivos maliciosos incrustados en contenido móvil entre aplicaciones, lo que permite manipular su comportamiento a través de engaños multimodales.

#Seguridad LLM#Prompt injection
6IA × Ciber✨arXiv cs.CR ·

MobileJailBench: Red Queen Jailbreak Benchmarking for Mobile Agents

MobileJailBench es el primer benchmark evolutivo para evaluar la vulnerabilidad de agentes móviles basados en MLLM frente a ataques de jailbreak. El trabajo presenta 520 tareas de prueba en tres paradigmas de jailbreak y 14 categorías de riesgo, ejecutadas en un sandbox móvil de alta fidelidad que cubre más de 20 aplicaciones populares. Los experimentos muestran que los agentes móviles actuales son particularmente vulnerables a jailbreaks implícitos, con alineamiento de seguridad superficial que no generaliza desde rechazo conversacional a interacciones móviles dinámicas.

#Jailbreak#Seguridad LLM#IA ofensiva
5IA × Ciber✨arXiv cs.CR ·

AgentLoupe: Kernel-Resident Semantic Causal Labels for AI Agent Observability

AgentLoupe es una herramienta de observabilidad basada en eBPF que permite rastrear las acciones de sistemas ejecutadas por agentes de IA hasta sus interacciones originales con modelos de lenguaje. El trabajo aborda limitaciones de métodos anteriores como AgentSight al manejar ejecuciones retrasadas y comportamientos que atraviesan múltiples procesos, capturando tráfico TLS e insertando etiquetas semánticas en recursos del kernel.

#IA defensiva#Seguridad LLM
6IA × Ciber✨arXiv cs.CR ·

Trojan Horse: Automated Repository Poisoning against Coding Agents

Investigadores presentan TrojanForge, un framework automático para envenenar repositorios de código contra agentes de IA. El sistema utiliza análisis de árboles sintácticos (AST) y trazas de ejecución para identificar ubicaciones óptimas donde inyectar payloads maliciosos, luego refina iterativamente estrategias de ocultamiento mediante confrontación adversaria. En pruebas sobre 384 repositorios envenenados, TrojanForge logra una tasa de éxito superior al 60% incluso contra agentes comerciales.

#Supply chain IA#IA ofensiva
5IA × CiberarXiv cs.CR ·

Cryptographically Secure Agent-to-Agent Communication in Multi-Agent Systems

Un artículo académico propone una arquitectura de seguridad criptográfica para la comunicación entre agentes en sistemas multiagente, abordando amenazas como la suplantación de identidad, interceptación de mensajes e inyección de prompts maliciosos. El enfoque integra identidad descentralizada, TLS mutuamente autenticado, criptografía poscuántica, e integridad de mensajes mediante sobre CBOR firmados.

#Seguridad LLM#Supply chain IA
5IA × Ciber✨arXiv cs.CR ·

When Approval Becomes Execution: Authorization-Grounded Workflow Attacks on Tool-Using Agents

Un artículo académico en arXiv describe un ataque de workflow autorizado contra agentes LLM que utilizan servicios locales. El ataque explota una brecha de autorización: el agente obtiene un token de aprobación válido del servicio de autorización local y lo utiliza para acceder a documentos protegidos, sin que se validen el contexto completo (identidad del solicitante, autoridad del aprobador, alcance del recurso). El ataque tuvo éxito en 8 de 9 ejecuciones controladas en el benchmark OpenClaw.

#Seguridad LLM#IA ofensiva
6IA × Ciber✨arXiv cs.CR ·

ECHO: Replacing the Compliance Proxy with Response Harmfulness in Optimization-Based Jailbreak Attack

Investigadores presentan ECHO, un método de ataque de jailbreak contra modelos de lenguaje que reemplaza métricas tradicionales de cumplimiento con puntuaciones de nocividad basadas en respuestas reales. El ataque logra tasas de éxito del 89,23% en HarmBench al evaluar la capacidad perjudicial real en lugar de detectar solo prefijos afirmativos superficiales, demostrando un déficit importante en los mecanismos de alineación de seguridad.

#Jailbreak#Seguridad LLM
5IA × CiberarXiv cs.CR ·

Surprise Masking: Private Data Filtering with Model Likelihoods

Se propone Surprise Masking (SM), un método de filtrado basado en perplejidad que utiliza un modelo de referencia disponible públicamente para identificar y suprimir el aprendizaje de información privada o no deseada en datos de entrenamiento de modelos de lenguaje, mientras preserva el resto de cada ejemplo. En experimentos con código sintético, SM mejora el equilibrio privacidad-utilidad respecto a métodos estándar de enmascaramiento y filtrado de información identificable personal (PII).

#Seguridad LLM#Investigación
5IA × CiberarXiv cs.CR ·

SAFE-Mem: Secure Agentic Memory with Fine-Grained Authority and Governance-Aware Retrieval

Los agentes LLM que usan memoria persistente enfrentan riesgos de seguridad cuando información de fuentes externas no confiables se trata como políticas o permisos autorizados. SAFE-Mem propone un marco de gobernanza de memoria con granularidad fina que etiqueta claims con autoridad y ámbito permitido, bloqueando influencias no autorizadas mientras preserva la utilidad legítima.

#Seguridad LLM#IA defensiva
6IA × Ciber✨arXiv cs.CR ·

When Core-Network Elements Become Reachable: Field-Level Exploitability Analysis in Diameter

Un equipo de investigación presenta LENS, un sistema basado en modelos de lenguaje para analizar la explotabilidad de protocolos de signalización de redes celulares como Diameter. El trabajo demuestra que los LLM por sí solos pueden ser poco fiables para este análisis, por lo que propone guiarlos con disciplina de explotabilidad y evidencia del protocolo. LENS descubre 95 vulnerabilidades previamente desconocidas en interfaces S6a y Cx, con impacto en implementaciones comerciales y de código abierto, incluyendo interrupción de servicio, fuga de información y seguimiento de suscriptores.

#Investigación#Seguridad LLM#Vulnerabilidad
3IA × CiberarXiv cs.CR ·

Provable Compliance: A Protocol for Runtime Compliance Evidence and Transaction-Specific Decisioning

Un artículo académico sobre ChainIT Provable Compliance, un protocolo para generar evidencia de cumplimiento normativo con atribución y timestamping criptográfico, pensado para instituciones reguladas que deleguen decisiones en agentes software. Propone representar hechos de compliance como aserciones firmadas con provenance, frescura y contexto de transacción, abordando la brecha entre políticas humanas y automatización.

#Regulación#Investigación
3IA × CiberarXiv cs.CR ·

Provable Authority: A Protocol for Verifiable Authority Resolution and Control Across Human, Organizational, and Agentic Transactions

Un protocolo académico propone un sistema de verificación de autoridad para transacciones ejecutadas por agentes de IA, garantizando que el agente actúa dentro de su delegación y con autorización vigente. El protocolo ChainIT Authority separa identidad, registros de autoridad organizacional, políticas y pruebas de ejecución para crear un plano de control de evidencia pre-ejecución neutral respecto del medio de pago.

#Supply chain IA#IA defensiva
6IA × Ciber✨arXiv cs.CR ·

Stealthy Poisoning Attacks via Reused KV Cache of Reasoning

Investigadores demuestran un ataque de envenenamiento (poisoning) contra sistemas LLM que reutilizan cachés de clave-valor de razonamientos previos. El ataque R²ECAP se ejecuta únicamente a través de la interfaz de chat, plantando trazas de razonamiento envenenadas que conservan influencia adversaria incluso después de que se descarten las trazas iniciales, logrando tasas de éxito de hasta el 79% y eludiendo detectores de inyección de prompts.

#Seguridad LLM#Prompt injection#Investigación
5IA × CiberarXiv cs.CR ·

GRAD: Graph-Structured Antibody Defense for LLM Agents

Investigadores proponen GRAD, una defensa basada en grafos para detectar ataques de envenenamiento de memoria y descomposición en agentes LLM. El sistema combina agregación de evidencia distribuida a través de un grafo de ejecución con adaptación continua de expertos de detección, logrando tasas de detección superiores al 77% en tres tipos de ataque.

#Seguridad LLM#Investigación
6IA × Ciber✨arXiv cs.CR ·

Veil-Then-Reveal: Protecting PII Privacy via Reversible Pseudo-Anonymization in Zero-Trust User--LLM Interaction

Un equipo de investigación presenta Veil-then-Reveal (VtR), un marco de pseudo-anonimización de información personalmente identificable (PII) que se ejecuta en el dispositivo del usuario antes de enviar solicitudes a proveedores remotos de LLM. El método reemplaza datos sensibles con sustitutos realistas manteniendo el texto plano en el cliente, combina cifrado que preserva el formato para PII estructurado con diccionarios hash y bóvedas seguras para PII semántico, y restaura reversiblemente los valores originales en las respuestas del modelo.

#Seguridad LLM#Privacidad
5IA × CiberarXiv cs.CR ·

The LLM-Attacker: A Unified Red-Team Framework for Privacy Evaluation of Split and Distributed LLM Systems

LLM-Attacker es un framework de investigación que estandariza la evaluación de privacidad en sistemas de modelos de lenguaje distribuidos, permitiendo comparar y reproducir ataques de reconstrucción de texto a partir de representaciones intermedias. Los experimentos muestran que los gradientes de entrenamiento aumentan significativamente la recuperación de tokens y documentos completos.

#Seguridad LLM#Investigación
4IA × CiberarXiv cs.CR ·

ACE: An AI-Orchestrated Intrusion Detection and Compliance Mapping Engine

ACE es un marco de trabajo impulsado por IA que integra detección de intrusiones, mapeo de controles normativos y despliegue automatizado de contramedidas para operaciones de seguridad. El sistema combina Suricata IDS, flujos LangGraph, generación aumentada por recuperación y modelos de lenguaje grandes para vincular alertas de intrusión con controles NIST SP 800-53 Rev. 5 y desplegar automáticamente reglas de detección.

#IA defensiva#Herramienta
6IA × Ciber✨arXiv cs.CR ·

What It Is, Not What It Says: Securing Agentic Browsing Interactions with Web Semantics

Investigadores proponen Intact, un sistema que asegura las interacciones de agentes IA que navegan la web, protegiéndolos contra inyecciones de contenido malicioso. Los agentes tradicionales consumen páginas como capturas de pantalla o texto plano, exponiendo sus LLMs a contenido no verificado que puede ser manipulado mediante inyecciones. Intact captura la procedencia y semántica web mediante GenTree, una representación que aísla cada elemento del LLM para evitar que el texto inyectado persuada al modelo a ejecutar acciones con autoridad del usuario.

#Seguridad LLM#Prompt injection
5IA × CiberarXiv cs.CR ·

Exploring The Empirical Privacy Landscape of Synthetic Data

Estudio que compara métodos para entrenar modelos de lenguaje con datos sensibles, evaluando el equilibrio entre capacidad y riesgo de fuga de privacidad. Los autores prueban técnicas como fine-tuning directo, DP-SGD y reescritura consciente de privacidad en registros médicos sintéticos, hallando que la reescritura consciente de privacidad ofrece un mejor balance que otras opciones.

#Seguridad LLM#Privacidad#Investigación
8IA × Ciber✨arXiv cs.CR ·

Model-as-a-Trojan: Self-Activating Covert DNS Exfiltration Baked Into the Weights of an LLM Agent

Un artículo de investigación demuestra que los pesos de un modelo de lenguaje abierto pueden ser infectados con malware que exfiltra datos de forma encubierta. El ataque, bautizado como Model-as-a-Trojan, instrumentaliza un agente LLM para ejecutar consultas DNS que codifican secretos del entorno en tiempo de ejecución, evadiendo cortafuegos que bloquean tráfico de salida no DNS. La técnica persiste en los pesos del modelo y resiste intentos de supresión por prompt, lo que cuestiona la seguridad de descargar modelos abiertos en sistemas con acceso a herramientas sensibles.

#Seguridad LLM#IA ofensiva#Supply chain IA
5IA × Ciber✨arXiv cs.CR ·

Everyone's a little bit racist: a novel ML backdoor attack in black-box mode

Investigadores presentan Backdoor-as-a-Service, una técnica de ataque black-box contra modelos de aprendizaje automático que activa comportamientos latentes sin modificar el entrenamiento ni los pesos del modelo. El método utiliza búsqueda genética para descubrir transformaciones de entrada que producen cambios sistemáticos en la salida alineados con una tarea maliciosa, demostrándose en un clasificador MNIST y en un clasificador NSFW de producción.

#Seguridad LLM#IA ofensiva
5IA × Ciber✨arXiv cs.CR ·

An Agentic ENF Framework for Forensic Video Authentication Against Generative AI

Investigadores presentan un marco forense basado en frecuencia de red eléctrica (ENF) para autenticar vídeo y detectar manipulaciones generadas por modelos de IA. El método extrae señales de la frecuencia de red del audio y del parpadeo de vídeo, que los generadores no controlan, logrando detectar autenticidad en grabaciones reales con precisión del 93% en audio y el 100% en vídeo.

#IA defensiva#Seguridad LLM
5IA × Ciber✨arXiv cs.CR ·

Recoverability-Controlled Safety Miscalibration in Large Language Models

Investigadores presentan RiskCueBench, un banco de pruebas que evalúa cómo los modelos de lenguaje grande alineados en seguridad distinguen entre la intención subyacente de una consulta y su formulación superficial. El estudio encuentra que aunque un modelo comprende correctamente la intención dañina, puede comportarse de forma menos segura cuando la solicitud se presenta con mayor especificidad contextual, revelando un desajuste en la calibración de seguridad.

#Seguridad LLM#Investigación
3IASimon Willison ·

llm-tools-datasette 0.1.1

Se lanza la versión 0.1.1 de llm-tools-datasette, una herramienta que integra modelos de lenguaje con Datasette. Se trata de una actualización menor de un proyecto en fase temprana de desarrollo.

#Producto de IA
3IA✨Simon Willison ·

llm-echo 0.5

Simon Willison lanza la versión 0.5 de llm-echo, un plugin de depuración para su herramienta LLM que simula un modelo sin usar un LLM real, solo repitiendo los prompts recibidos. La nueva versión mejora el cálculo de tokens simulados para incluir tool calls, system prompts y reasoning tokens.

#Producto de IA#Recurso
4IATechCrunch AI ·

Anthropic says it’s committing 5% of its shares to a ‘public benefit fund’

Anthropic anuncia la creación de un fondo de «beneficio público» con el 5% de sus acciones, con opción de contribuir un 2% adicional por cada aumento del 50% en su valoración. El fondo financiará proyectos de impacto social, incluyendo donaciones a organizaciones sin ánimo de lucro y estudios sobre el impacto de la IA en el mercado laboral, en respuesta a la creciente desconfianza pública hacia la industria.

#Empresa de IA#Regulación