# Peer review con IA: potencia tu revisión, conserva tu criterio ## Prólogo La revisión por pares está experimentando una transformación profunda con la llegada de la IA generativa. Los revisores arrastran una presión creciente de más manuscritos, menos tiempo, desencadenando fatiga. Herramientas como ChatGPT, Claude, Gemini o Perplexity parecen aliviar esta carga automatizando resúmenes, detectando inconsistencias y mejorando la redacción. Pero la IA puede ser tanto una ayuda como una trampa. El problema no es la tecnología en sí, sino cómo la usamos. Ya estamos viendo casos preocupantes, como investigadores [insertando prompts ocultos](https://medium.com/enrique-dans/cheating-the-algorithm-the-sneaky-tactics-infiltrating-academia-a5fddddeee8a) en sus manuscritos para manipular revisiones automatizadas, revisores subiendo documentos confidenciales sin autorización, y lo más grave, la tentación de delegar el juicio crítico a una máquina que, por muy sofisticada que sea, carece de comprensión real del estado del arte. ## 1. Riesgos del uso de IA en la revisión por pares ### 1.1. Problemas legales y de confidencialidad Cuando subes un manuscrito a ChatGPT, Claude o cualquier LLM público, estás rompiendo el acuerdo de confidencialidad con la revista. - **Fuga de información**: Los papers pueden acabar en datasets de entrenamiento - **Propiedad intelectual comprometida**: Ideas novedosas expuestas antes de publicación - **Rastro digital permanente**: Todo queda registrado en servidores externos - **Responsabilidad legal**: Podrías enfrentar demandas por incumplimiento ### 1.2. Alucinaciones y percepciones erróneas Esto es [inherente a la IA](https://openai.com/es-419/index/why-language-models-hallucinate/) y carente de solución técnica. **Tipos de alucinaciones comunes** - Citas bibliográficas falsas pero plausibles - Valores estadísticos inventados que "suenan bien" - Frases que no existen en el paper - Conclusiones extrapoladas sin base **Problemas de procesamiento** - PDFs con columnas múltiples pueden generar lectura desordenada - Tablas complejas llevan a interpretación errónea - Figuras y gráficos a veces son totalmente ignorados - Metadatos y campos ocultos generan información contradictoria - Ecuaciones LaTeX pueden ser malinterpretadas como texto ### 1.3. Ausencia de juicio experto y contexto Este es el problema más grave, la IA carece del conocimiento tácito que hace valiosa una revisión. **Lo que la IA NO puede evaluar** 1. **Novedad real** - No conoce el estado del arte y si el autor dice "esto es novedoso", la IA lo creerá 3. **Adecuación metodológica** - Cuestiones como tamaños de muestra, controles específicos, limitaciones prácticas o la viabilidad real son absolutas desconocidas para la IA 3. **Contexto del campo** - Controversias, estándares o aspectos no tácitos le son desconocidos ## 2. Cómo NO usar la IA | **Mal uso** | **Por qué NO** | **Prompt tóxico** | **Consecuencia probable** | |---|---|---|---| | **Sustituir la lectura** | Te pierdes TODA la sustancia del paper y es el core de la revisión | *"Lee este PDF y dime si merece publicarse"* | Revisión superficial e injusta | | **Evaluar originalidad** | La IA no tiene acceso al estado del arte actual | *"¿Es este trabajo novedoso en el campo?"* | Aprobar trabajos redundantes | | **Juzgar metodología** | Desconoce estándares y prácticas del área | *"¿El diseño experimental es robusto?"* | Pasar por alto fallos críticos u obviar limitaciones prácticas | | **Decisión editorial** | Carece de criterio y responsabilidad | *"Basándote en esto, ¿acepto o rechazo?"* | Decisiones arbitrarias y condescendientes con el revisor | | **Generar revisión completa** | Produce texto genérico sin valor real | *"Escribe una revisión de 500 palabras"* | Feedback inútil para autores y que casi siempre sigue un mismo patrón | | **Confirmar prejuicios** | La IA dirá lo que quieres oír | *"Este paper es mediocre, ¿verdad?"* | Sesgo de confirmación amplificado | | **Detectar fraude** | No puede verificar datos ni ética | *"¿Hay manipulación en estos resultados?"* | Falsos positivos o negativos | | **Comparar con literatura** | Su conocimiento está desactualizado o no puede separar literatura basura de relevante | *"¿Se alinea con trabajos recientes?"* | Comparaciones incorrectas | ### ⚠️ El problema del "instruction bias" La IA está pensada para satisfacer al usuario y darle en la medida de la posible la razón, por lo que: - Si le dices a la IA "este paper tiene problemas metodológicos", encontrará problemas. - Si le dices "este paper es excelente", encontrará excelencias. La IA es un espejo de tus expectativas, no un evaluador objetivo. ## 3. Cómo SÍ usar la IA ### 3.1. Tareas de procesamiento de texto | **Buen uso** | **Cómo ayuda realmente** | **Prompt efectivo** | **Limitación a recordar** | |---|---|---|---| | **Corrección gramatical** | Detecta errores que se nos pasan | *"Identifica errores gramaticales y sugiere correcciones"* | No entiende jerga específica | | **Búsqueda inteligente** | Mejor que Ctrl+F para conceptos | *"Dime paso por paso que han hecho los autores para generar el dataset"* | Puede no encontrar info en tablas o imágenes | | **Resúmenes estructurados** | Vista rápida antes de lectura profunda | *"Lista los objetivos y conclusiones realizadas"* | Es solo un punto de partida | | **Clarificación conceptual** | Explica términos o métodos desconocidos | *"¿Qué es un random forest y cómo puedo valorar si es correcto su funcionamiento?"* | Explicación genérica, no específica | ### 3.2. Apoyo a la redacción de tu revisión **Para mejorar TU texto, no para generarlo** | **Aplicación** | **Ejemplo práctico** | **Qué SÍ hacer** | **Qué NO hacer** | |---|---|---|---| | **Organizar ideas** | Tienes 20 comentarios dispersos | Pedir estructura lógica | Dejar que escriba la revisión | | **Mejorar tono** | Tu crítica suena muy dura o agresiva | Reformular constructivamente | Suavizar problemas graves | | **Síntesis** | Revisión muy larga | Condensar manteniendo esencia | Eliminar críticas importantes | | **Traducción técnica** | Revisar paper en otro idioma | Ayuda con términos específicos | Confiar ciegamente en la traducción | ### 3.3. Técnicas avanzadas (con precaución) **Role-playing para perspectiva** ``` "Eres el autor de este paper. Acabo de escribir estos comentarios de revisión. Ponte en la piel de los autores y genera una respuesta defendiendo el trabajo" ``` **Útil para:** Anticipar malentendidos, mejorar claridad **Verificación de consistencia** ``` "Revisa si hay contradicciones entre mis comentarios" ``` **Útil para:** Detectar incoherencias en tu revisión **Análisis de respuestas de autores** ``` "Los autores me han dado este documento de respuestas. Dame un breve resumen indicando la respeusta y que han realizado para atender el comentario." ``` Útil para: Evaluación inicial de cambios