Revisar documentos largos por partes con IA: comprobar las condiciones que pueden perderse al combinar resúmenes parciales

01Entender primero el contexto y los chunks

Puede entenderse el contexto como el rango de entrada al que un modelo de IA hace referencia al generar una respuesta para una solicitud. Si resulta difícil introducir un material largo de una sola vez o es necesario revisarlo por secciones, el documento puede dividirse en varios chunks. Sin embargo, los límites de longitud de entrada y la calidad del procesamiento de documentos largos varían según el producto y el modelo, y el simple hecho de dividir un documento no garantiza la precisión. El DOC-01 de esta práctica es solo un ejemplo ficticio para reproducir a pequeña escala un procedimiento de procesamiento de documentos largos y no es un documento largo real.

DOC-01/v1
C1: [L1] Solo los miembros registrados del taller ficticio pueden solicitar la participación. [L2] Las solicitudes se aceptan hasta el 18 de octubre a las 18:00.
C2: [L2] Las solicitudes se aceptan hasta el 18 de octubre a las 18:00. [L3] El cupo es de 12 personas. [L4] La cuota de participación es de 8,000 wones.
C3: [L5] La cancelación de la solicitud puede pedirse hasta el 16 de octubre a las 18:00. [L6] Si se supera el cupo, la persona pasa a la lista de espera y su participación no queda confirmada.

En un estudio de Anthropic de 2023 se probó un método para localizar primero la evidencia necesaria para responder dentro de entradas largas. Como se trata de un experimento específico, no se generaliza como garantía de rendimiento de los modelos actuales.

02Extraer primero la evidencia de cada chunk

En lugar de crear desde el principio un resumen completo, extraiga de cada chunk las afirmaciones y condiciones fila por fila. Si registra conjuntamente DOC-01 y v1, será más fácil comprobar si se ha mezclado contenido de otros documentos o de versiones anteriores. Si continúa con el siguiente paso en un chat nuevo, es más seguro volver a proporcionar los datos de entrada y las instrucciones necesarias en lugar de asumir que la conversación anterior continuará automáticamente.

Use únicamente los datos siguientes para extraer la evidencia de cada chunk.
En cada fila, indique el ID del documento, la versión, el chunk, el número de línea original y el hecho.
No deduzca años, días de la semana, métodos de pago ni condiciones de reembolso que no aparezcan en el original.
Aunque la misma frase aparezca en varios chunks, no la elimine todavía; márquela.

[Vuelva a pegar aquí todo C1~C3 de DOC-01/v1]

03Eliminar duplicados sin combinar condiciones diferentes

Al combinar las extracciones parciales, compruebe primero que el DOC y la version de todos los elementos sean iguales. Después, consolide únicamente el L2 repetido en C1 y C2. En cambio, el cierre de solicitudes y el plazo de cancelación tienen fechas y significados diferentes, por lo que no deben combinarse como un único plazo. En los límites de los chunks también debe comprobarse no solo si hay frases repetidas, sino si el corte de las condiciones anteriores o posteriores ha cambiado su significado.

Combine los resultados de las extracciones parciales en uno solo.
1. Compruebe que todos los elementos sean DOC-01/v1
2. Elimine únicamente la duplicación de la misma evidencia L2
3. Mantenga el plazo de solicitud y el plazo de cancelación como elementos separados
4. Compruebe que las seis evidencias L1~L6 estén todas reflejadas en el resultado final
5. No añada métodos de pago, políticas de reembolso, años ni días de la semana que no aparezcan en el original
Al final, indique los números de línea de la evidencia utilizada.

Ejemplo de edición · No es un resultado de ejecución real en un producto
- Destinatarios: solo pueden solicitarlo los miembros registrados. [L1]
- Plazo de solicitud: hasta el 18 de octubre a las 18:00. [L2]
- Cupo: 12 personas. [L3]
- Cuota de participación: 8,000 wones. [L4]
- Plazo para solicitar la cancelación: hasta el 16 de octubre a las 18:00. [L5]
- Si se supera el cupo, se pasa a la lista de espera, pero la participación no queda confirmada. [L6]
Comprobación: DOC-01/v1, duplicado L2 eliminado, L1~L6 conservados.

04Crear un fallo por omisión y volver al texto original

Aunque los resúmenes de cada chunk se lean con naturalidad, eso no garantiza que cubran todo el alcance. Por ejemplo, si se omite C3, el resultado puede parecer fluido, pero desaparecerán por completo el plazo de cancelación y la condición de la lista de espera. Por ello, no revise únicamente leyendo el texto finalizado; contraste en sentido inverso la lista de chunks prevista originalmente y la lista de líneas de evidencia.

Ejemplo de edición · No es un resultado de ejecución real en un producto
Solo los miembros registrados pueden solicitarlo y las solicitudes se aceptan hasta el 18 de octubre a las 18:00. El cupo es de 12 personas y la cuota de participación es de 8,000 wones.
Problema: se ha omitido C3, por lo que no pueden comprobarse el plazo de cancelación de L5 ni la condición de espera de L6.

Vuelva a contrastar el resultado anterior con el original DOC-01/v1.
Compruebe primero si se utilizaron C1, C2 y C3, y encuentre las líneas que falten entre L1~L6.
Restaure el contenido omitido sin cambiar el significado de la expresión original.
No complete años, días de la semana, condiciones de pago ni de reembolso que no aparezcan en el original.

05Comprobar todo el alcance antes de pasar a la siguiente revisión

En el último paso se comprueba la trazabilidad más que la calidad de redacción del resumen. Si se conservan el DOC y la versión, todos los chunks previstos, el rango de líneas de evidencia y el registro de los duplicados eliminados, resulta más fácil volver a comprobar qué pudo faltar. En documentos largos, este registro adquiere mayor importancia a medida que aumenta el número de chunks. Si se conecta con el método de tabla de evaluación del siguiente artículo, el resultado obtenido puede volver a evaluarse según criterios fijos de hechos y condiciones, diferenciando entre un 'resumen plausible' y un 'resultado que puede revisarse'.

Comprobación final
[ ] ¿Todos los datos son DOC-01/v1?
[ ] ¿Se procesaron C1·C2·C3?
[ ] ¿Se eliminó únicamente el duplicado L2?
[ ] ¿Se conservaron las seis evidencias L1~L6?
[ ] ¿Se distinguieron la solicitud del 18 de octubre a las 18:00 y la cancelación del 16 de octubre a las 18:00?
[ ] ¿La lista de espera no se transformó en participación confirmada?
[ ] ¿No se dedujeron pago·reembolso·año·día de la semana?
[ ] ¿En un chat nuevo se volvieron a proporcionar los datos de entrada y las instrucciones?

Qué comprobar por tu cuenta

Se contrastan los datos ficticios y los ejemplos de edición con el texto original y la lista de comprobación. No son resultados ejecutados en un producto de IA.

• Comprobar que DOC-01 y la versión v1 se mantienen en todas las etapas
• Contrastar el alcance completo de C1·C2·C3 y L1~L6
• Comprobar que solo se elimina el duplicado L2 y que se conservan L5·L6
• Comprobar que el plazo de solicitud y el plazo de cancelación no se intercambian ni se combinan
• Comprobar que no se generan condiciones de pago·reembolso·año·día de la semana que no aparezcan en el original

Fuente de la explicación