Mittaamme juridisen tekoälymme julkisesti
Jokainen Attorlyn julkaisu mitataan korpusverifioiduilla oikeuslähdetehtävillä neljällä lainkäyttöalueella. Tuoreimmat tulokset — läpäisyt, hylkäykset ja menetelmä — julkaistaan täällä.
Tuoreimmat tulokset
| Lainkäyttöalue | Tehtävät | Läpäistyt | Läpäisyaste |
|---|---|---|---|
| Norja | 8 | 8 | 100% |
| Ruotsi | 1 | 1 | 100% |
| Tanska | 0 | 0 | — |
| Saksa | 0 | 0 | — |
Näin mittaus toimii
Jokainen tehtävä kuvaa oikeudellisen kysymyksen niin kuin todellinen käyttäjä sen muotoilisi — tapausyhteenvetona tai selvityskysymyksenä — ja pyytää hakujärjestelmältämme olennaisimmat oikeuslähteet. Tehtävä läpäistään vain, jos asiaa tosiasiallisesti sääntelevät lait nousevat esiin tuloksissa.
Kyselyt eivät tarkoituksella koskaan nimeä sovellettavaa lakia — sen nimeäminen tekisi hausta triviaalin eikä mittaisi mitään. Jokainen tehtävä varmennetaan lainkäyttöalueensa virallista oikeuslähdekorpusta vasten ennen lisäämistä.
Sovellettava laki nousee esiin
Jokaisen asiaa sääntelevän lain on löydyttävä haetuista lähteistä. Jos sovellettava laki puuttuu, tehtävä hylätään.
Kohina pysyy poissa
Tunnetut sivuavat lähteet — uskottavan näköiset mutta epäolennaiset lait — eivät saa nousta esiin. Kohina tuloksissa hylkää tehtävän.
Järjestyskuri
Valituissa tehtävissä sovellettavan lain on oltava tulosten kärjessä, ei vain jossakin niiden joukossa.
Tulokset tehtävittäin
Tehtäväkuvaukset näytetään englanniksi — ne ovat mittauksen lähdeaineistoa ja identtisiä kaikilla kielillä.
| Tehtävä | Lainkäyttöalue | Tulos |
|---|---|---|
| no-tenancy-depositTenancy: landlord withholding a deposit after move-out | Norja | Läpäisty |
| no-criminal-embezzlementCriminal defence: gross embezzlement (the Fredrik regression guard) | Norja | Läpäisty |
| no-employment-dismissalEmployment: contested dismissal / unfair termination | Norja | Läpäisty |
| no-family-custodyFamily: parental responsibility and where the child lives | Norja | Läpäisty |
| no-sale-defectContract: defect in a commercial sale of goods | Norja | Läpäisty |
| no-company-sharesCorporate: shareholder dispute in a limited company | Norja | Läpäisty |
| no-personal-dataPrivacy: unlawful processing of personal data | Norja | Läpäisty |
| no-inheritanceInheritance: distribution of an estate and forced share | Norja | Läpäisty |
| se-employment-dismissalEmployment: contested dismissal (Lagen om anställningsskydd) | Ruotsi | Läpäisty |
| se-consumer-saleConsumer: defective goods purchased by a consumer (Konsumentköplagen) | Ruotsi | Ohitettu |
| se-company-sharesCorporate: minority shareholder dispute (Aktiebolagslagen) | Ruotsi | Ohitettu |
| se-discriminationEmployment: workplace discrimination (Diskrimineringslagen) | Ruotsi | Ohitettu |
| se-family-custodyFamily: custody and residence after separation (Föräldrabalken) | Ruotsi | Ohitettu |
| se-criminal-embezzlementCriminal defence: embezzlement (Brottsbalken) | Ruotsi | Ohitettu |
| dk-employment-dismissalEmployment: salaried-employee dismissal (Funktionærloven) | Tanska | Ohitettu |
| dk-sale-defectSale: defective goods and right to reject (Købeloven) | Tanska | Ohitettu |
| dk-company-sharesCorporate: shareholder dispute in a capital company (Selskabsloven) | Tanska | Ohitettu |
| dk-family-custodyFamily: parental responsibility and residence (Forældreansvarsloven) | Tanska | Ohitettu |
| dk-inheritanceInheritance: estate distribution and forced share (Arveloven) | Tanska | Ohitettu |
| dk-criminal-embezzlementCriminal defence: embezzlement (Straffeloven) | Tanska | Ohitettu |
| de-employment-dismissalEmployment: unfair dismissal protection (Kündigungsschutzgesetz) | Saksa | Ohitettu |
| de-criminal-embezzlementCriminal defence: embezzlement (Strafgesetzbuch) | Saksa | Ohitettu |
| de-sale-defectSale: defective goods and buyer remedies (Bürgerliches Gesetzbuch) | Saksa | Ohitettu |
Mitä tämä näyttää — ja mitä ei
- Tämä on sisäinen mittaus, jonka olemme itse laatineet ja arvioineet. Se ei ole riippumaton arviointi — pidä sitä omana laatukriteerinämme, joka on julkaistu, jotta voit vaatia meiltä sen täyttämistä.
- Se mittaa oikeuslähteiden hakua — nouseeko oikea laki esiin asiassa. Se ei mittaa laaditun tekstin tai kokonaisten vastausten laatua.
- Tulokset tuotetaan automaattisesti jokaisesta käyttöön otetusta julkaisusta ja julkaistaan muokkaamattomina, epäonnistumiset mukaan lukien.