FOIA: umjetna inteligencija skraćuje redakciju s tjedana na sate
Ažurirano za 2026.
Savezna vlada u 2024. potrošila je procijenjenih 500 milijuna dolara na obradu FOIA zahtjeva. Većina tog troška bila je ručna redakcija. Zaostatak DOJ-a premašio je 100.000 otvorenih zahtjeva.
ARPA-H je 2025. objavio nabavu softvera za redakciju s umjetnom inteligencijom. HHS je utvrdio da njegovoj jedinici CMS trebaju alati s umjetnom inteligencijom. Ručni rad stvorio je zaostatke koje osoblje nije moglo riješiti.
Pitanje se promijenilo. Više nije riječ o tome treba li automatizirati. Riječ je o tome kako to učiniti tako da izdrži na sudu.
Problem saveznog zaostatka
Prema 5 U.S.C. §552 agencije moraju odgovoriti u roku od 20 radnih dana. U praksi mnoge trebaju mjesece. Neke godine.
Zaostatak DOJ-a od 100.000+ zahtjeva odgovara otprilike 2 milijarde minuta ručnog pregleda. Pritom se pretpostavlja samo 20 minuta po zahtjevu. Po državnim satnicama trošak rada ide u milijarde.
Većina tog vremena odlazi na jedan zadatak. Osoblje pregledava stranice tražeći imena, adrese i telefonske brojeve. To ne zahtijeva pravnu prosudbu. Zahtijeva prepoznavanje obrazaca. Algoritam to obavi za nekoliko sekundi.
Što su zahtijevali ARPA-H i HHS
ARPA-H je tražio softver za redakciju s umjetnom inteligencijom za obradu FOIA dokumenata. Njihovi navedeni zahtjevi bili su:
- Automatsko prepoznavanje osobnih podataka prema izuzećima Exemption 6 i 7(C).
- Skupna obrada velikih skupova dokumenata.
- Podrška za mješovite formate: PDF, Word i e-pošta.
- Dokumentacija revizijskog traga.
- Obranjiv izlaz za odgovor na FOIA zahtjev.
HHS/CMS došao je do istog zaključka. Rastući opseg i nepromijenjen broj zaposlenih ručni pregled učinili su neodrživim. Te agencije nisu jurile novu tehnologiju. Rješavale su krizu usklađenosti.
Savezne države i lokalna razina: manje resursa, ista pravila
Savezne agencije imaju namjenske FOIA urede i pravne proračune. Savezne države i lokalne vlasti imaju iste pravne obveze s mnogo manje resursa.
CPRA u Kaliforniji zahtijeva odgovore u roku od 10 kalendarskih dana. Okrug s pravnim timom od troje ljudi ne može u tom roku obraditi 2.000 dokumenata. Mogućnosti su ograničene:
- Odbiti ili odgoditi – što stvara pravni rizik.
- Zaposliti privremeno osoblje – skupo i sporo.
- Automatizirati mehaničku fazu redakcije.
Opcija 3 sada je na dohvat ruke. Ista skupna obrada koju koriste savezne agencije dostupna je pravnim odjelima okruga. Nisu potrebni dugi rokovi nabave. U našem pregledu usklađenosti pogledajte kako se pravila o javnim evidencijama primjenjuju u različitim jurisdikcijama.
DSAR-ovi u EU-u: isti problem
Zahtjevi ispitanika za pristup podacima (DSAR) prema članku 15. GDPR-a stvaraju paralelan izazov za organizacije u EU-u. Za razliku od FOIA-e, obveze DSAR-a vrijede za sve organizacije koje obrađuju osobne podatke. Mala SaaS tvrtka može primiti isti broj DSAR-ova kao velika banka.
Praktični izazov odražava FOIA-u. Organizacija mora dostaviti sve podatke koje čuva o određenoj osobi. Osobne podatke trećih osoba treba redigirati iz odgovora. Rok je 30 dana.
Svaki DSAR koji zahvaća arhive e-pošte, zahtjeve za podršku i evidencije narudžbi može značiti stotine dokumenata za provjeru. Za organizacije koje obrađuju 20–50 DSAR-ova mjesečno ručni pregled traži jednog ili više zaposlenika s punim radnim vremenom. Skupna automatizacija to svodi na posao s nepunim radnim vremenom.
Obrada na računalu za osjetljive evidencije
Neke agencije ne mogu koristiti web-alate. Podaci koji moraju ostati unutar sustava agencije zahtijevaju lokalnu obradu.
Desktop aplikacija anonym.legal izrađena je za taj slučaj uporabe:
- Desktop aplikacija čita datoteke na vlastitom hardveru agencije; detekcija se izvodi putem API-ja smještenog u EU-u, što je jedina dopuštena komunikacija.
- Veza je internetska i ograničena samo na anonym.legal – potrebna je aktivna veza.
- Skupne obrade obuhvaćaju 1–5.000 datoteka odjednom.
- Podržani formati: PDF, DOCX, XLSX, TXT, CSV, JSON, XML.
- Obrađene datoteke pakiraju se kao ZIP arhiva.
- Uključen je izvoz u CSV i JSON s metapodacima po datoteci.
Za agencije sa strogim pravilima o lokaciji podataka, ali s dopuštenom vanjskom vezom, to je pravo rješenje: desktop aplikacija koristi isti model detekcije – XLM-RoBERTa s 273 vrste entiteta – kao i web-platforma. Za agencije s uistinu zračno odvojenom mrežom i bez ikakve vanjske povezanosti desktop aplikacija ne dolazi u obzir; naš sestrinski proizvod anonym.plus umjesto toga izvodi detekciju u cijelosti na uređaju.
Pojedinosti o postavljanju potražite u našoj dokumentaciji desktop aplikacije.
Napomene o provedbi
Revizijski tragovi. Vladini radni tokovi zahtijevaju evidenciju o tome što je redigirano, na kojoj osnovi i tko je to učinio. Metapodaci skupne obrade pokrivaju prva dva. Usmjeravanje dokumenata s iznimkama na pregled osoblja pokriva ostalo.
Dosljednost. FOIA odgovor koji u jednom dokumentu redigira ime, a u drugom ga propusti, stvara pravnu izloženost. Fiksna automatska konfiguracija uklanja tu nedosljednost.
SBU materijali. Mnogi vladini dokumenti osjetljivi su, ali neklasificirani. Lokalna obrada obrađuje SBU datoteke bez korištenja mreže. Web-obrada s odgovarajućim DPA ugovorima pokriva datoteke koje nisu SBU.
Izlazni format. Metoda Redact koristi zamjenu crnom trakom. To odgovara izgledu standardnih FOIA redakcija i prikladno je za podnošenje sudu. Pristup s oznakama – primjerice [REDACTED - Exemption 6] – dodaje izričito navođenje izuzeća za detaljnije evidencije.
Zaključak
FOIA je zakonska obveza. Rok od 20 radnih dana nije cilj. Kad opseg zahtjeva premaši mogućnosti osoblja, slijede propusti.
Skupna redakcija uz umjetnu inteligenciju ne zamjenjuje pravnu prosudbu. Uklanja mehaničku fazu – pronalaženje i označavanje standardnih osobnih podataka u tisućama dokumenata. Ta faza troši 70–80 % vremena pregleda. Osoblje se tada može usredotočiti na 10–20 % dokumenata u kojima je kontekst važan.
ARPA-H i HHS/CMS oboje su to uočili. Savezne države, lokalne vlasti i organizacije u EU-u s obvezama DSAR-a suočavaju se s istim izazovom. U našem pregledu sigurnosti i usklađenosti pogledajte kako su strukturirani obranjivi radni tokovi redakcije.
Kada ovaj pristup ima ograničenja
Automatizacija mehaničke faze redakcije ispravna je podjela rada – vrijeme osoblja pripada prosudbama, a ne pregledavanju stranica u potrazi za imenima. No vrijede tri ograničenja.
Lokalna obrada kontrolira pohranu, a ne kvalitetu detekcije. Za agencije s dopuštenom vanjskom vezom desktop aplikacija drži datoteke na hardveru agencije dok se detekcija izvodi na poslužiteljima anonym.legal – to rješava lokaciju podataka, ali redakciju ne čini točnijom. Za agencije s uistinu nultom povezanošću anonym.plus umjesto toga izvodi istu klasu modela u cijelosti na uređaju. U oba slučaja propušteno ime ostaje propušteno, bez obzira na to je li datoteka ikad napustila zgradu. Kontrola lokacije i kvaliteta detekcije odvojena su jamstva, a tretiranje lokalne obrade kao da potvrđuje potpunost kategorijska je pogreška koju vrijedi jasno imenovati.
Ugrađeni model izvan mreže zastarijeva bez namjernih ažuriranja. anonym.plus zamrzava svoj model detekcije na uređaju na onoj verziji koja je instalirana; novi formati identifikatora, šifre predmeta specifične za agenciju i promjenjivi izgledi dokumenata neće biti prepoznati dok netko namjerno ne ažurira paket, a u izoliranoj mreži nema automatskog osvježavanja. Hostirana detekcija anonym.legal – koju koriste desktop aplikacija i web-platforma gdje postoji aktivna veza – umjesto toga ažurira se automatski. Raspored i testiranje ažuriranja modela planirajte kao operativni zadatak za slučaj izvan mreže te nakon svakog ponovno validirajte na aktualnim uzorcima dokumenata, inače točnost neprimjetno opada dok se čini da cjevovod radi potpuno kao prije.
Standard obranjivosti zahtijeva ljudsku prosudbu, a ne izlaz alata. Čisto izvješće o skupnoj obradi i revizijski zapisnik podupiru odgovor na FOIA ili DSAR zahtjev, ali ga ne čine. Odluke između Exemption 6 i 7(C), razlike između službenih i privatnih osoba te pitanja povlastice pravna su utvrđenja. Kroz tisuće dokumenata sustavni propust u konfiguraciji reproducira se tisućama puta, pa skupni opseg povećava pojedinačnu pogrešku umjesto da je izgladi. Mehanička faza može se automatizirati; obveza razumne pažnje ostaje na odvjetniku koji pregledava, a red iznimaka mora biti odgovarajuće popunjen osobljem.