Medimos a nossa IA jurídica em público
Cada versão do Attorly é avaliada com tarefas de recuperação de fontes jurídicas verificadas no corpus, em quatro jurisdições. Os resultados mais recentes — aprovações, falhas e método — são publicados aqui.
Resultados mais recentes
| Jurisdição | Tarefas | Aprovadas | Taxa de aprovação |
|---|---|---|---|
| Noruega | 8 | 8 | 100% |
| Suécia | 1 | 1 | 100% |
| Dinamarca | 0 | 0 | — |
| Alemanha | 0 | 0 | — |
Como funciona a avaliação
Cada tarefa descreve uma questão jurídica tal como um utilizador real a formularia — um resumo de caso ou uma pergunta de investigação — e pede ao nosso sistema de recuperação as fontes jurídicas mais relevantes. A tarefa só é aprovada se as normas que efetivamente regem a questão surgirem nos resultados.
As consultas nunca mencionam deliberadamente a lei aplicável — mencioná-la tornaria a recuperação trivial e nada mediria. Cada tarefa é verificada no corpus jurídico oficial da respetiva jurisdição antes de ser adicionada.
A lei aplicável surge nos resultados
Todas as normas que regem a questão têm de constar das fontes recuperadas. Se a lei determinante faltar, a tarefa falha.
O ruído fica de fora
Fontes tangenciais conhecidas — normas de aspeto plausível mas irrelevantes — não podem surgir. Se surgir ruído, a tarefa falha.
Disciplina de ordenação
Em tarefas selecionadas, a lei aplicável tem de surgir no topo dos resultados, e não apenas algures na lista.
Resultados por tarefa
As descrições das tarefas são apresentadas em inglês — são os dados de origem da avaliação, idênticos em todas as línguas.
| Tarefa | Jurisdição | Resultado |
|---|---|---|
| no-tenancy-depositTenancy: landlord withholding a deposit after move-out | Noruega | Aprovada |
| no-criminal-embezzlementCriminal defence: gross embezzlement (the Fredrik regression guard) | Noruega | Aprovada |
| no-employment-dismissalEmployment: contested dismissal / unfair termination | Noruega | Aprovada |
| no-family-custodyFamily: parental responsibility and where the child lives | Noruega | Aprovada |
| no-sale-defectContract: defect in a commercial sale of goods | Noruega | Aprovada |
| no-company-sharesCorporate: shareholder dispute in a limited company | Noruega | Aprovada |
| no-personal-dataPrivacy: unlawful processing of personal data | Noruega | Aprovada |
| no-inheritanceInheritance: distribution of an estate and forced share | Noruega | Aprovada |
| se-employment-dismissalEmployment: contested dismissal (Lagen om anställningsskydd) | Suécia | Aprovada |
| se-consumer-saleConsumer: defective goods purchased by a consumer (Konsumentköplagen) | Suécia | Ignorada |
| se-company-sharesCorporate: minority shareholder dispute (Aktiebolagslagen) | Suécia | Ignorada |
| se-discriminationEmployment: workplace discrimination (Diskrimineringslagen) | Suécia | Ignorada |
| se-family-custodyFamily: custody and residence after separation (Föräldrabalken) | Suécia | Ignorada |
| se-criminal-embezzlementCriminal defence: embezzlement (Brottsbalken) | Suécia | Ignorada |
| dk-employment-dismissalEmployment: salaried-employee dismissal (Funktionærloven) | Dinamarca | Ignorada |
| dk-sale-defectSale: defective goods and right to reject (Købeloven) | Dinamarca | Ignorada |
| dk-company-sharesCorporate: shareholder dispute in a capital company (Selskabsloven) | Dinamarca | Ignorada |
| dk-family-custodyFamily: parental responsibility and residence (Forældreansvarsloven) | Dinamarca | Ignorada |
| dk-inheritanceInheritance: estate distribution and forced share (Arveloven) | Dinamarca | Ignorada |
| dk-criminal-embezzlementCriminal defence: embezzlement (Straffeloven) | Dinamarca | Ignorada |
| de-employment-dismissalEmployment: unfair dismissal protection (Kündigungsschutzgesetz) | Alemanha | Ignorada |
| de-criminal-embezzlementCriminal defence: embezzlement (Strafgesetzbuch) | Alemanha | Ignorada |
| de-sale-defectSale: defective goods and buyer remedies (Bürgerliches Gesetzbuch) | Alemanha | Ignorada |
O que isto mostra — e o que não mostra
- Esta é uma avaliação interna, criada e classificada por nós. Não é uma avaliação independente — encare-a como a nossa própria fasquia de qualidade, publicada para que nos possa responsabilizar por ela.
- Mede a recuperação de fontes jurídicas — se a lei certa surge para uma questão. Não mede a qualidade do texto redigido nem das respostas completas.
- Os resultados são gerados automaticamente para cada versão implementada e publicados sem edição, incluindo as falhas.