7 min de lectura Elegir una herramienta de IA jurídica exige siete comprobaciones: fuentes desglosadas (cuáles, de qué jurisdicción, actualizadas a cuándo), verificación con enlace a la fuente oficial, benchmark con metodología pública, destino contractual de los datos, límites declarados por el proveedor, registro de la diligencia y condiciones de salida. La evidencia publicada con revisión por pares (Universidad de Stanford, Journal of Empirical Legal Studies, 2025) muestra que las herramientas especializadas reducen el error frente a los chats generalistas —en su medición, entre el 17% y el 33% de fallos frente al 43% del generalista— pero no lo eliminan: por eso «cero alucinaciones, garantizado» es el primer detector de humo. En este artículo: las siete preguntas desarrolladas para llevar a la reunión comercial, y por qué un tribunal español ya fijó por escrito el precio de la diligencia.
Cuando te vendan una IA jurídica, la primera frase del vendedor te dice casi todo. Si empieza por «cero alucinaciones, garantizado», ya puedes ir acortando la reunión. No porque la herramienta sea necesariamente mala. Porque quien te promete lo que la evidencia publicada no respalda te está pidiendo fe — y en derecho no trabajamos con fe. Trabajamos con fuentes.
Lo que dice la evidencia (la de verdad, con revisión por pares)
El estudio académico de referencia lo publicó la Universidad de Stanford en una revista jurídica revisada por pares. Midió herramientas de investigación jurídica con IA — las especializadas de pago, no los chats generalistas — y encontró dos cosas a la vez:
La buena: las herramientas especializadas reducen mucho el error frente a un chat generalista.
La incómoda: no lo eliminan. En su medición, las especializadas fallaron en un rango de entre el 17% y el 33% de los casos, frente al 43% del modelo generalista que usaron de comparación.
Aviso honesto sobre el alcance: midieron herramientas americanas, sobre derecho anglosajón. Del mercado español no me consta una medición equivalente publicada con metodología abierta. Eso no tranquiliza: significa que aquí compramos con menos información — y que las preguntas que siguen son más necesarias, no menos.
Un momento: ¿qué es un «wrapper»?
La palabra que conviene conocer antes de la lista. Un wrapper (envoltorio) es un producto que solo envuelve un modelo de terceros —el mismo chat que ya usas gratis— con una capa de marketing jurídico encima, sin tecnología propia relevante: sin corpus verificado, sin anclaje a fuentes oficiales, sin registro. No es ilegal venderlo. Pero deberías saber qué estás comprando, porque el precio de la capa de pintura a veces es notable.
Las siete preguntas (llévalas a la reunión)
1 · ¿Sobre qué fuentes trabaja — cuáles, de qué jurisdicción, actualizadas a cuándo?
«Millones de documentos» no es una respuesta: es un titular. La respuesta seria desglosa: qué tipos de documento, qué vigencia, cómo se actualiza.
2 · ¿Cada afirmación enlaza a su fuente oficial?
La prueba de los cinco segundos: pides una respuesta con jurisprudencia y compruebas si cada cita abre la resolución oficial o si te toca buscarla a mano y rezar.
3 · ¿Publicáis un benchmark con metodología — o me pedís que me lo crea?
Un benchmark serio dice qué se midió, cómo, con cuántos casos y dónde falla. Un número redondo sin metodología es marketing con decimales.
4 · ¿A dónde van mis datos?
Dónde se procesan, si se entrena con ellos, quién puede verlos, cómo se borran. Por contrato, no de palabra. (Si leíste el artículo sobre IA y secreto profesional, ya sabes por qué esta pregunta no es negociable.)
5 · ¿Qué límites declaráis?
Una herramienta seria publica lo que NO hace. La que «lo hace todo» — búsqueda, redacción, contabilidad y el café — suele no hacer bien nada. La confesión de límites es la mejor señal de ingeniería honesta que existe.
6 · ¿Qué queda registrado de mi diligencia?
El día que alguien te pregunte si verificaste — y esta serie empezó con un tribunal preguntando exactamente eso — ¿tienes constancia, o tienes memoria?
7 · ¿Qué pasa si me voy?
Exportación de mis datos, formato, plazo, coste. La facilidad de salida es la mejor medida de la confianza del proveedor en su producto.
El precio de la diligencia (lo fijó un tribunal, no un vendedor)
Quizá recuerdes el detalle del caso de las 48 sentencias que no existían: cuando el tribunal canario calculó la multa al abogado, tomó como referencia lo que cuestan las herramientas de IA jurídica serias — dejó escrito «planes desde 70 euros mensuales», según la nota oficial del Poder Judicial.
Así que la pregunta del precio está mal planteada. No es «¿70 euros al mes es caro?». Es: ¿comparado con qué? ¿Con las horas que pierdes comprobando a mano lo que te da un chat gratuito? ¿Con el día que no compruebes? Un tribunal ya hizo esa cuenta por escrito. Salía a favor de la herramienta.
Las referencias de precio del mercado cambian; la cifra citada es la que el propio auto dejó por escrito en febrero de 2026 — este artículo no recomienda precio ni proveedor.
La parte donde este examen me examina a mí
Seré transparente: llevo semanas contándoos que estoy construyendo un sistema de trabajo con IA para despachos. Estas siete preguntas también van por mí. Lo que estoy construyendo tendrá que responderlas por escrito — corpus desglosado, benchmark con metodología pública, arquitectura de datos y registro — o no merecerá venderse. Publicar el examen antes de presentarse a él es la parte del «sin humo» que no se puede fingir.
Preguntas frecuentes
¿Qué es un «wrapper» en IA legal?
Un producto que solo envuelve un modelo de terceros —el mismo chat generalista de siempre— con una capa de marketing jurídico, sin tecnología propia relevante: sin corpus verificado, sin anclaje a fuentes oficiales, sin registro de la actividad. No es ilegal venderlo, pero conviene saber qué se compra: las siete preguntas de este artículo lo detectan en una reunión.
¿Qué tasa de error tienen las herramientas de IA jurídica?
La única medición académica con revisión por pares (Stanford, Journal of Empirical Legal Studies, 2025) encontró entre un 17% y un 33% de fallos en herramientas especializadas de pago, frente al 43% del modelo generalista de comparación — sobre herramientas americanas y derecho anglosajón. Reducen el error; no lo eliminan. Del mercado español no consta una medición equivalente con metodología abierta.
¿Qué debe incluir un benchmark serio de una IA jurídica?
Qué se midió, cómo se midió, con cuántos casos, de qué tipos, y dónde falla la herramienta. Un porcentaje redondo sin metodología publicada no es un benchmark: es marketing con decimales. Si el proveedor no puede enseñar la metodología, la respuesta honesta es que no la tiene.
¿Cuánto cuesta una IA jurídica seria?
Las referencias de mercado cambian, pero hay una cifra con valor especial: al calcular una sanción por citas inventadas, el TSJ de Canarias tomó como referencia herramientas con «planes desde 70 euros mensuales» (auto de febrero de 2026). Más útil que el precio absoluto es la comparación: cuánto cuesta la alternativa en horas de verificación manual — o en el día que no se verifique.
¿Qué debo preguntar sobre mis datos antes de contratar?
Cuatro cosas, por contrato y no de palabra: dónde se procesan (jurisdicción), si se entrena con ellos (y cómo excluirse), quién puede acceder, y cómo y cuándo se borran — incluida la exportación si decides irte. La facilidad de salida es la mejor medida de la confianza del proveedor en su propio producto.
Fuentes de este artículo
- Magesh et al., Journal of Empirical Legal Studies (Stanford, 2025).
- Nota oficial del Poder Judicial (auto del TSJ de Canarias).
- De esta serie: las 48 sentencias que no existían y IA y secreto profesional.
Fuentes verificadas el 6-jul-2026. En este blog no se pide fe: se enlaza la fuente.
Cada dos semanas publico un análisis como este en la newsletter PYME Digital PRO: digitalización de despachos, gestorías y pymes profesionales, sin humo. Suscríbete en LinkedIn.
Comentarios 0