Medimos nuestra IA jurídica en público
Cada versión de Attorly se evalúa frente a tareas de recuperación de fuentes jurídicas verificadas contra el corpus en cuatro jurisdicciones. Los últimos resultados — tareas superadas, fallos y método — se publican aquí.
Últimos resultados
| Jurisdicción | Tareas | Superadas | Tasa de éxito |
|---|---|---|---|
| Noruega | 8 | 8 | 100% |
| Suecia | 1 | 1 | 100% |
| Dinamarca | 0 | 0 | — |
| Alemania | 0 | 0 | — |
Cómo funciona la evaluación
Cada tarea describe un asunto jurídico tal como lo haría un usuario real — un resumen de caso o una pregunta de investigación — y pide a nuestro sistema de recuperación las fuentes jurídicas más relevantes. La tarea solo se supera si las normas que realmente rigen el asunto aparecen en los resultados.
Las consultas nunca nombran deliberadamente la ley aplicable — nombrarla haría trivial la recuperación y no mediría nada. Cada tarea se verifica contra el corpus jurídico oficial de su jurisdicción antes de añadirse.
La ley aplicable aparece
Toda norma que rige el asunto debe figurar entre las fuentes recuperadas. Si falta la ley determinante, la tarea falla.
El ruido queda fuera
Las fuentes tangenciales conocidas — normas de apariencia plausible pero irrelevantes — no deben aparecer. Si aparece ruido, la tarea falla.
Disciplina de clasificación
En determinadas tareas, la ley aplicable debe aparecer en lo más alto de los resultados, no simplemente en algún lugar de ellos.
Resultados por tarea
Las descripciones de las tareas se muestran en inglés — son los datos de origen de la evaluación, idénticos en todos los idiomas.
| Tarea | Jurisdicción | Resultado |
|---|---|---|
| no-tenancy-depositTenancy: landlord withholding a deposit after move-out | Noruega | Superada |
| no-criminal-embezzlementCriminal defence: gross embezzlement (the Fredrik regression guard) | Noruega | Superada |
| no-employment-dismissalEmployment: contested dismissal / unfair termination | Noruega | Superada |
| no-family-custodyFamily: parental responsibility and where the child lives | Noruega | Superada |
| no-sale-defectContract: defect in a commercial sale of goods | Noruega | Superada |
| no-company-sharesCorporate: shareholder dispute in a limited company | Noruega | Superada |
| no-personal-dataPrivacy: unlawful processing of personal data | Noruega | Superada |
| no-inheritanceInheritance: distribution of an estate and forced share | Noruega | Superada |
| se-employment-dismissalEmployment: contested dismissal (Lagen om anställningsskydd) | Suecia | Superada |
| se-consumer-saleConsumer: defective goods purchased by a consumer (Konsumentköplagen) | Suecia | Omitida |
| se-company-sharesCorporate: minority shareholder dispute (Aktiebolagslagen) | Suecia | Omitida |
| se-discriminationEmployment: workplace discrimination (Diskrimineringslagen) | Suecia | Omitida |
| se-family-custodyFamily: custody and residence after separation (Föräldrabalken) | Suecia | Omitida |
| se-criminal-embezzlementCriminal defence: embezzlement (Brottsbalken) | Suecia | Omitida |
| dk-employment-dismissalEmployment: salaried-employee dismissal (Funktionærloven) | Dinamarca | Omitida |
| dk-sale-defectSale: defective goods and right to reject (Købeloven) | Dinamarca | Omitida |
| dk-company-sharesCorporate: shareholder dispute in a capital company (Selskabsloven) | Dinamarca | Omitida |
| dk-family-custodyFamily: parental responsibility and residence (Forældreansvarsloven) | Dinamarca | Omitida |
| dk-inheritanceInheritance: estate distribution and forced share (Arveloven) | Dinamarca | Omitida |
| dk-criminal-embezzlementCriminal defence: embezzlement (Straffeloven) | Dinamarca | Omitida |
| de-employment-dismissalEmployment: unfair dismissal protection (Kündigungsschutzgesetz) | Alemania | Omitida |
| de-criminal-embezzlementCriminal defence: embezzlement (Strafgesetzbuch) | Alemania | Omitida |
| de-sale-defectSale: defective goods and buyer remedies (Bürgerliches Gesetzbuch) | Alemania | Omitida |
Qué muestra esto — y qué no
- Esta es una evaluación interna, diseñada y calificada por nosotros. No es una evaluación independiente — considérala nuestro propio listón de calidad, publicado para que puedas exigirnos que lo cumplamos.
- Mide la recuperación de fuentes jurídicas — si aparece la ley correcta para un asunto. No mide la calidad del texto redactado ni de las respuestas completas.
- Los resultados se generan automáticamente para cada versión desplegada y se publican sin editar, incluidos los fallos.