Kvalitetu naše pravne AI mjerimo javno
Svako izdanje Attorlyja mjeri se na korpusno provjerenim zadacima dohvaćanja pravnih izvora u četiri jurisdikcije. Najnoviji rezultati — prolazi, padovi i metoda — objavljuju se ovdje.
Najnoviji rezultati
| Jurisdikcija | Zadaci | Prošlo | Stopa prolaznosti |
|---|---|---|---|
| Norveška | 11 | 11 | 100% |
| Švedska | 9 | 9 | 100% |
| Danska | 9 | 9 | 100% |
| Njemačka | 8 | 8 | 100% |
Kako mjerenje funkcionira
Svaki zadatak opisuje pravno pitanje onako kako bi ga formulirao stvarni korisnik — kao sažetak slučaja ili istraživačko pitanje — i od našeg sustava dohvaćanja traži najrelevantnije pravne izvore. Zadatak prolazi samo ako se propisi koji to pitanje stvarno uređuju pojave u rezultatima.
Upiti namjerno nikad ne imenuju mjerodavni propis — imenovanje bi dohvaćanje učinilo trivijalnim i ne bi mjerilo ništa. Svaki se zadatak prije dodavanja provjerava prema službenom pravnom korpusu svoje jurisdikcije.
Mjerodavno pravo se pojavljuje
Svaki propis koji uređuje predmetno pitanje mora se pojaviti među dohvaćenim izvorima. Ako mjerodavni propis nedostaje, zadatak pada.
Šum ostaje vani
Poznati rubni izvori — propisi koji djeluju uvjerljivo, ali su irelevantni — ne smiju se pojaviti. Pojavi li se šum, zadatak pada.
Disciplina rangiranja
Za odabrane zadatke mjerodavni propis mora biti na vrhu rezultata, a ne tek negdje među njima.
Rezultati po zadacima
Opisi zadataka prikazuju se na engleskom — oni su izvorni podaci mjerenja i identični su na svim jezicima.
| Zadatak | Jurisdikcija | Rezultat |
|---|---|---|
| no-tenancy-depositTenancy: landlord withholding a deposit after move-out | Norveška | Prošao |
| no-criminal-embezzlementCriminal defence: gross embezzlement (the Fredrik regression guard) | Norveška | Prošao |
| no-employment-dismissalEmployment: contested dismissal / unfair termination | Norveška | Prošao |
| no-family-custodyFamily: parental responsibility and where the child lives | Norveška | Prošao |
| no-sale-defectContract: defect in a commercial sale of goods | Norveška | Prošao |
| no-company-sharesCorporate: shareholder dispute in a limited company | Norveška | Prošao |
| no-personal-dataPrivacy: unlawful processing of personal data | Norveška | Prošao |
| no-inheritanceInheritance: distribution of an estate and forced share | Norveška | Prošao |
| no-bankruptcy-supplierInsolvency: supplier stopped paying, creditor weighs bankruptcy petition | Norveška | Prošao |
| no-house-hidden-defectsReal property: hidden defects after buying a house (avhendingslova, NOT tenancy) | Norveška | Prošao |
| no-stale-invoice-claimLimitation: collecting on a years-old unpaid invoice (foreldelsesloven) | Norveška | Prošao |
| se-employment-dismissalEmployment: contested dismissal (Lagen om anställningsskydd) | Švedska | Prošao |
| se-consumer-saleConsumer: defective goods purchased by a consumer (Konsumentköplagen) | Švedska | Prošao |
| se-company-sharesCorporate: minority shareholder dispute (Aktiebolagslagen) | Švedska | Prošao |
| se-discriminationEmployment: workplace discrimination (Diskrimineringslagen) | Švedska | Prošao |
| se-family-custodyFamily: custody and residence after separation (Föräldrabalken) | Švedska | Prošao |
| se-criminal-embezzlementCriminal defence: embezzlement (Brottsbalken) | Švedska | Prošao |
| se-inheritance-forced-shareInheritance: estate division and the children's reserved share (Ärvdabalken) | Švedska | Prošao |
| se-tenancy-evictionTenancy: landlord terminating a lease — hyresrätt lives in Jordabalken, a hard mapping | Švedska | Prošao |
| se-stale-debt-claimLimitation: enforcing an old consumer debt (Preskriptionslag) | Švedska | Prošao |
| dk-employment-dismissalEmployment: salaried-employee dismissal (Funktionærloven) | Danska | Prošao |
| dk-sale-defectSale: defective goods and right to reject (Købeloven) | Danska | Prošao |
| dk-company-sharesCorporate: shareholder dispute in a capital company (Selskabsloven) | Danska | Prošao |
| dk-family-custodyFamily: parental responsibility and residence (Forældreansvarsloven) | Danska | Prošao |
| dk-inheritanceInheritance: estate distribution and forced share (Arveloven) | Danska | Prošao |
| dk-criminal-embezzlementCriminal defence: embezzlement (Straffeloven) | Danska | Prošao |
| dk-holiday-pay-exitEmployment: holiday pay owed when an employee resigns (Ferieloven) | Danska | Prošao |
| dk-employee-dataData protection: employer monitoring employee e-mail (Databeskyttelsesloven) | Danska | Prošao |
| dk-divorce-assetsFamily: division of assets at divorce (Ægtefælleloven) | Danska | Prošao |
| de-employment-dismissalEmployment: unfair dismissal protection (Kündigungsschutzgesetz) | Njemačka | Prošao |
| de-criminal-embezzlementCriminal defence: embezzlement (Strafgesetzbuch) | Njemačka | Prošao |
| de-sale-defectSale: defective goods and buyer remedies (Bürgerliches Gesetzbuch) | Njemačka | Prošao |
| de-gmbh-formationCorporate: founding a GmbH, share capital and managing-director duties (GmbHG) | Njemačka | Prošao |
| de-insolvency-filing-dutyInsolvency: over-indebted company and the duty to file (Insolvenzordnung) | Njemačka | Prošao |
| de-working-time-overtimeEmployment: overtime limits and rest periods (Arbeitszeitgesetz) | Njemačka | Prošao |
| de-works-council-codeterminationEmployment: works council consultation before restructuring (BetrVG) | Njemačka | Prošao |
| de-misleading-advertisingCompetition: competitor runs misleading price advertising (UWG) | Njemačka | Prošao |
Citati izvora asistenta
Mjeri ostaju li citati izvora asistenta unutar mjerodavnog prava: za svako pitanje najviši se izvori ocjenjuju prema popisu očito nepovezanih zakona. Citiranje npr. pomorskog radnog prava u običnom otkazu računa se kao šum.
| Zadatak | Jurisdikcija | Šum | Rezultat |
|---|---|---|---|
| no-chip-employment-dismissalEmployment chips: office dismissal must not surface maritime-labour law | Norveška | 0/4 | Prošao |
| no-chip-employment-overtimeEmployment chips: unpaid retail overtime | Norveška | 0/2 | Prošao |
| no-chip-employment-temp-contractsEmployment chips: serial temporary contracts, claim to permanent employment | Norveška | 0/3 | Prošao |
| no-chip-employment-harassmentEmployment chips: whistleblowing about harassment at the office | Norveška | 0/3 | Prošao |
| no-chip-employment-holiday-payEmployment chips: holiday pay not paid out after quitting | Norveška | 0/3 | Prošao |
| no-chip-family-custodyFamily chips: residence and contact after a breakup | Norveška | 0/5 | Prošao |
| no-chip-family-divorce-assetsFamily chips: division of marital property and skjevdeling | Norveška | 0/2 | Prošao |
| no-chip-family-child-supportFamily chips: disagreement about child support | Norveška | 0/3 | Prošao |
| no-chip-consumer-used-carConsumer chips: used car from a dealer with hidden defects | Norveška | 0/3 | Prošao |
| no-chip-consumer-craftsmanConsumer chips: botched bathroom renovation by a craftsman | Norveška | 0/3 | Prošao |
| no-chip-consumer-online-cancellationConsumer chips: right of withdrawal on an online purchase | Norveška | 0/3 | Prošao |
| no-chip-housing-depositHousing chips: landlord withholding the deposit after move-out | Norveška | 0/2 | Prošao |
Točnost provjere izvora
Nakon svakog odgovora s izvorima asistent provjerava svaki citat prema tekstu izvora na koji upućuje i označava ga kao potvrđen, djelomično potkrijepljen ili nepotkrijepljen. Ovaj benchmark mjeri sam provjeravač na označenim parovima tvrdnje i doslovnog izvatka zakona s poznatim odgovorom.
Polovica parova su gotovo-pogoci: pravi zakon, ali pogrešan rok, iznos ili strana – slučaj koji popustljiv provjeravač propušta. Lažno prihvaćanje, nepotkrijepljena tvrdnja označena kao potvrđena, broj je koji je važan; lažno odbijanje čitatelja košta samo dodatnu provjeru.
| Zadatak | Jurisdikcija | Točan odgovor | Provjeravač je rekao | Rezultat |
|---|---|---|---|---|
| no-aml-15-3-notice-one-monthaml § 15-3 (NL/lov/2005-06-17-62): default one-month mutual notice period restated | Norveška | Potkrijepljeno | Potvrđeno | Prošao |
| no-aml-15-3-notice-three-months-near-missaml § 15-3: claim states a three-month default notice period (statute says one month) | Norveška | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| no-aml-15-3-five-years-two-monthsaml § 15-3 (2): at least two months after five years of continuous employment | Norveška | Potkrijepljeno | Potvrđeno | Prošao |
| no-aml-15-1-consultation-before-dismissalaml § 15-1: employer must consult the employee before deciding on dismissal | Norveška | Potkrijepljeno | Nepotkrijepljeno | Pao |
| no-aml-15-1-consultation-optional-near-missaml § 15-1: claim says the consultation is optional for the employer (statute makes it a duty) | Norveška | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| no-aml-15-4-written-formaml § 15-4: dismissal must be in writing | Norveška | Potkrijepljeno | Potvrđeno | Prošao |
| no-husleie-3-5-deposit-six-monthshusleieloven § 3-5 (NL/lov/1999-03-26-17): deposit capped at six months of rent | Norveška | Potkrijepljeno | Potvrđeno | Prošao |
| no-husleie-3-5-deposit-three-months-near-misshusleieloven § 3-5: claim caps the deposit at three months (statute says six) | Norveška | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| no-husleie-3-5-off-topic-noticehusleieloven § 3-5 (deposit) cited for a claim about notice periods in employment | Norveška | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| no-fkjl-27-two-year-limitforbrukerkjøpsloven § 27 (NL/lov/2002-06-21-34): absolute two-year complaint deadline, five for durable goods | Norveška | Potkrijepljeno | Potvrđeno | Prošao |
| no-fkjl-27-three-year-near-missforbrukerkjøpsloven § 27: claim states a three-year absolute deadline (statute says two / five) | Norveška | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| no-ferie-5-off-topic-depositferieloven § 5 (NL/lov/1988-04-29-21, holiday length) cited for a claim about rent deposits | Norveška | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| se-las-11-minimum-one-monthLAS 11 § (sfs-1982-80): minimum one-month notice for both parties | Švedska | Potkrijepljeno | Potvrđeno | Prošao |
| se-las-11-four-years-three-monthsLAS 11 §: three months after at least four but under six years of employment | Švedska | Potkrijepljeno | Potvrđeno | Prošao |
| se-las-11-ten-years-twelve-months-near-missLAS 11 §: claim gives twelve months after ten years (statute says six) | Švedska | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| se-semester-4-twenty-five-dayssemesterlagen 4 § (sfs-1977-480): twenty-five days of holiday per year | Švedska | Potkrijepljeno | Potvrđeno | Prošao |
| se-semester-4-thirty-days-near-misssemesterlagen 4 §: claim gives thirty days (statute says twenty-five) | Švedska | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| se-kkl-5-2-two-months-always-timelykonsumentköplagen 5 kap. 2 § (sfs-2022-260): a complaint within two months of noticing is always timely | Švedska | Potkrijepljeno | Potvrđeno | Prošao |
| se-kkl-5-2-off-topic-noticekonsumentköplagen 5 kap. 2 § (complaints) cited for a claim about employment notice | Švedska | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| dk-ful-2-three-months-after-sixfunktionærloven § 2 (lta/2017/1002): three months notice from the employer after six months of employment | Danska | Potkrijepljeno | Potvrđeno | Prošao |
| dk-ful-2-cap-six-monthsfunktionærloven § 2, stk. 3: the notice period grows by one month per three years, capped at six months | Danska | Potkrijepljeno | Potvrđeno | Prošao |
| dk-ful-2-cap-nine-months-near-missfunktionærloven § 2: claim caps the notice period at nine months (statute says six) | Danska | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| dk-kbl-83-two-year-limitkøbeloven § 83 (lta/2021/1853): defects must be raised within two years of delivery | Danska | Potkrijepljeno | Potvrđeno | Prošao |
| dk-kbl-83-five-year-near-misskøbeloven § 83: claim states a five-year absolute deadline (statute says two) | Danska | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| dk-ferie-5-off-topic-noticeferieloven § 5 (lta/2024/152, holiday accrual) cited for a claim about notice periods | Danska | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| de-bgb-622-four-weeks-basicBGB § 622 (1) (bgb): basic four-week notice to the 15th or month end | Njemačka | Potkrijepljeno | Potvrđeno | Prošao |
| de-bgb-622-five-years-two-monthsBGB § 622 (2) Nr. 2: two months after five years for an employer termination | Njemačka | Potkrijepljeno | Potvrđeno | Prošao |
| de-bgb-622-probation-four-weeks-near-missBGB § 622 (3): claim gives four weeks during probation (statute says two weeks) | Njemačka | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| de-bgb-551-deposit-three-monthsBGB § 551 (1): rent deposit capped at three months of net rent | Njemačka | Potkrijepljeno | Potvrđeno | Prošao |
| de-bgb-551-deposit-six-months-near-missBGB § 551: claim allows six months of rent as deposit (statute says three) | Njemačka | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| de-kschg-1-six-months-thresholdKSchG § 1 (1) (kschg): protection applies after more than six months of uninterrupted employment | Njemačka | Potkrijepljeno | Potvrđeno | Prošao |
| de-kschg-4-three-week-deadlineKSchG § 4: claim must be filed within three weeks of receiving the written termination | Njemačka | Potkrijepljeno | Potvrđeno | Prošao |
| de-kschg-4-four-week-near-missKSchG § 4: claim gives a four-week filing deadline (statute says three weeks) | Njemačka | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
| de-kschg-1-off-topic-depositKSchG § 1 (dismissal protection) cited for a claim about rent deposits | Njemačka | Nepotkrijepljeno | Nepotkrijepljeno | Prošao |
Što ovo pokazuje — a što ne
- Ovo je interno mjerenje koje smo sami sastavili i ocijenili. Nije neovisna evaluacija — shvatite ga kao naš vlastiti standard kvalitete, objavljen kako biste nas mogli držati odgovornima.
- Mjeri dohvaćanje pravnih izvora — pojavljuje li se pravi propis za određeno pitanje. Ne mjeri kvalitetu sastavljenog teksta ni cjelovitih odgovora.
- Rezultati se automatski generiraju za svako implementirano izdanje i objavljuju bez uređivanja, uključujući padove.