Közbeszerzési Hatóság

Öt év közbeszerzés strukturálása — és természetes nyelven kereshetővé tétele.

Egy országos hatóság 100 000+ strukturálatlan XML közbeszerzési dokumentumon ült. Megépítettük az AI- és adatbányászati folyamatot, amely strukturálja őket, plusz egy RAG-alapú jogi chatbotot, amely hivatkozásokkal válaszol az ügyintézőknek.

Projektidőszak

2021 — jelenleg is (5+ év)

Szerepünk

Az adatfolyamat, az ML+LLM kurálási munkafolyamat és a belső chatbot tervezése és szállítása; retrospektív kinyerés EU adat-átvilágításhoz.

Kontextus

A közbeszerzési adat dönti el, hová kerül a közpénz. A hatóság archívuma havonta több ezer XML-dokummal nőtt, mindegyik másképp strukturálva, mindegyik jogilag jelentős.

A költséges probléma

Az ügyintézők kutatási kérésenként nagyjából 35 percet töltöttek — egyesével nyitották a dokumentumokat, kézzel ellenőrizték a jogi hivatkozásokat, és újragépelték a megállapításokat a jelentésekbe.

Kiindulási mérés

4 hét alatt mérve, 12 ügyintézővel: 35 perces medián kérésenként, a válaszok 11%-át korrigálták később felettesi felülvizsgálat után, lefedettségi statisztika egyáltalán nem létezett.

Beavatkozás

Hibrid folyamat: determinisztikus XML-leképezés, ahol létezik struktúra; ML-modellek, ahol változó; és egy LLM-réteg a jognyelvi visszakereséshez. A chatbot magyarul válaszol, hivatkozással a pontos dokumentumra és bekezdésre — minden állítás ellenőrizhető.

Emberi felelősségek

Az ügyintézők hagynak jóvá minden kinyert mezőhalmazt, mielőtt bekerül a hivatalos nyilvántartásba
Jogászok hetente mintát ellenőriznek a chatbot válaszaiból; a hibák az értékelési halmazba kerülnek
A hatóság IT-csapata birtokolja az üzemeltetést — mi dokumentálunk és átadunk, ők üzemeltetnek

Mért eredmény

35 → 6 percmedián kutatási idő kérésenként, a bevezetés után 8 hétig mérve

100 000+dokumentum strukturálva és kereshető, teljes 5 éves retrospektív lefedettséggel

2,4%felülvizsgálat utáni javítási arány, a kiindulási 11%-ról

Korlátok

A megtakarítás a kutatási és visszakeresési munkára mért, nem a jogi mérlegelésre — az a tisztviselőknél marad. Az EU-megfelelési scope a meghatározott adat-átvilágítási mezőkre vonatkozik, nem általános tanúsítás.

A kutatási sorok még aznap elfogytak ahelyett, hogy felhalmozódtak volna; az ügyintézők ideje a tartalmi jogi felülvizsgálat felé tolódott. A betanítás két félnapos ülésből állt; az adopciót hetente követtük, és a második hónaptól 80% fölött maradt.

Következő lépés

Ugyanannak a folyamatnak a kiterjesztése eredményhirdetési dokumentumokra és szállítói előzmények elemzésére.

Beszéljünk egy hasonló problémáról Összes referencia