Povratak na blogTehnička

FOIA: redakcija od nedelja do sati

Savezna vlada je 2024. potrošila procenjenih 500 miliona dolara na obradu FOIA zahteva, uglavnom na ručnu redakciju.

May 28, 20268 min čitanja
FOIA automationgovernment AIARPA-HDSARpublic records redaction

FOIA: veštačka inteligencija skraćuje redakciju sa nedelja na sate

Ažurirano za 2026.

Savezna vlada je 2024. potrošila procenjenih 500 miliona dolara na obradu FOIA zahteva. Većina tog troška bila je ručna redakcija. Zaostatak DOJ-a premašio je 100.000 otvorenih zahteva.

ARPA-H je 2025. objavio nabavku softvera za redakciju zasnovanog na veštačkoj inteligenciji. HHS je utvrdio da njegovoj jedinici CMS trebaju alati zasnovani na veštačkoj inteligenciji. Ručni rad stvorio je zaostatke koje osoblje nije moglo da reši.

Pitanje se promenilo. Više nije reč o tome da li treba automatizovati. Reč je o tome kako to uraditi tako da izdrži na sudu.

Problem saveznog zaostatka

Prema 5 U.S.C. §552 agencije moraju da odgovore u roku od 20 radnih dana. U praksi mnoge troše mesece. Neke godine.

Zaostatak DOJ-a od 100.000+ zahteva odgovara otprilike 2 milijarde minuta ručnog pregleda. Pritom se pretpostavlja samo 20 minuta po zahtevu. Po državnim satnicama trošak rada ide u milijarde.

Većina tog vremena odlazi na jedan zadatak. Osoblje pregleda stranice tražeći imena, adrese i brojeve telefona. To ne zahteva pravnu procenu. Zahteva prepoznavanje obrazaca. Algoritam to obavi za nekoliko sekundi.

Šta su zahtevali ARPA-H i HHS

ARPA-H je tražio softver za redakciju zasnovan na veštačkoj inteligenciji za obradu FOIA dokumenata. Njihovi navedeni zahtevi bili su:

  • Automatsko prepoznavanje ličnih podataka prema izuzecima Exemption 6 i 7(C).
  • Grupna obrada velikih skupova dokumenata.
  • Podrška za mešovite formate: PDF, Word i e-pošta.
  • Dokumentacija revizorskog traga.
  • Odbranjiv izlaz za odgovor na FOIA zahtev.

HHS/CMS došao je do istog zaključka. Rastući obim i nepromenjen broj zaposlenih ručni pregled učinili su neodrživim. Te agencije nisu jurile novu tehnologiju. Rešavale su krizu usklađenosti.

Savezne države i lokalni nivo: manje resursa, ista pravila

Savezne agencije imaju namenske FOIA kancelarije i pravne budžete. Savezne države i lokalne vlasti imaju iste pravne obaveze sa mnogo manje resursa.

CPRA u Kaliforniji zahteva odgovore u roku od 10 kalendarskih dana. Okrug sa pravnim timom od troje ljudi ne može da obradi 2.000 dokumenata u tom roku. Mogućnosti su ograničene:

  1. Odbiti ili odložiti – što stvara pravni rizik.
  2. Zaposliti privremeno osoblje – skupo i sporo.
  3. Automatizovati mehaničku fazu redakcije.

Opcija 3 je sada na dohvat ruke. Ista grupna obrada koju koriste savezne agencije dostupna je pravnim odeljenjima okruga. Nisu potrebni dugi rokovi nabavke. U našem pregledu usklađenosti pogledajte kako se pravila o javnim evidencijama primenjuju u različitim jurisdikcijama.

DSAR u EU: isti problem

Zahtevi lica na koje se podaci odnose za pristup podacima (DSAR) prema članu 15 GDPR-a stvaraju paralelan izazov za organizacije u EU. Za razliku od FOIA-e, obaveze iz DSAR-a važe za sve organizacije koje obrađuju lične podatke. Mala SaaS kompanija može da primi isti broj DSAR-a kao velika banka.

Praktičan izazov odražava FOIA-u. Organizacija mora da dostavi sve podatke koje čuva o određenoj osobi. Lične podatke trećih lica treba redigovati iz odgovora. Rok je 30 dana.

Svaki DSAR koji zahvata arhive e-pošte, zahteve za podršku i evidencije porudžbina može značiti stotine dokumenata za proveru. Za organizacije koje obrađuju 20–50 DSAR-a mesečno ručni pregled traži jednog ili više zaposlenih sa punim radnim vremenom. Grupna automatizacija to svodi na posao sa skraćenim radnim vremenom.

Obrada na računaru za osetljive evidencije

Neke agencije ne mogu da koriste veb alate. Podaci koji moraju da ostanu unutar sistema agencije zahtevaju lokalnu obradu.

Desktop aplikacija anonym.legal izgrađena je za ovaj slučaj upotrebe:

  • Desktop aplikacija čita datoteke na sopstvenom hardveru agencije; detekcija se izvršava preko API-ja smeštenog u EU, što je jedina dozvoljena komunikacija.
  • Veza je internetska i ograničena samo na anonym.legal – potrebna je aktivna veza.
  • Grupne obrade obuhvataju 1–5.000 datoteka odjednom.
  • Podržani formati: PDF, DOCX, XLSX, TXT, CSV, JSON, XML.
  • Obrađene datoteke se pakuju kao ZIP arhiva.
  • Uključen je izvoz u CSV i JSON sa metapodacima po datoteci.

Za agencije sa strogim pravilima o lokaciji podataka, ali sa dozvoljenom spoljnom vezom, ovo je pravo rešenje: desktop aplikacija koristi isti model detekcije – XLM-RoBERTa sa 273 vrste entiteta – kao i veb platforma. Za agencije sa zaista vazdušno odvojenom mrežom i bez ikakve spoljne povezanosti desktop aplikacija ne dolazi u obzir; naš srodni proizvod anonym.plus umesto toga izvršava detekciju u potpunosti na uređaju.

Pojedinosti o podešavanju potražite u našoj dokumentaciji desktop aplikacije.

Napomene o sprovođenju

Revizorski tragovi. Vladini tokovi rada zahtevaju evidenciju o tome šta je redigovano, na kojoj osnovi i ko je to uradio. Metapodaci grupne obrade pokrivaju prva dva. Usmeravanje dokumenata sa izuzecima na pregled osoblja pokriva ostalo.

Doslednost. FOIA odgovor koji u jednom dokumentu redaguje ime, a u drugom ga propusti, stvara pravnu izloženost. Fiksna automatska konfiguracija uklanja tu nedoslednost.

SBU materijali. Mnogi vladini dokumenti su osetljivi, ali neklasifikovani. Lokalna obrada obrađuje SBU datoteke bez korišćenja mreže. Veb obrada sa odgovarajućim DPA ugovorima pokriva datoteke koje nisu SBU.

Izlazni format. Metod Redact koristi zamenu crnom trakom. To odgovara izgledu standardnih FOIA redakcija i pogodno je za podnošenje sudu. Pristup sa oznakama – na primer [REDACTED - Exemption 6] – dodaje izričito navođenje izuzetka za detaljnije evidencije.

Zaključak

FOIA je zakonska obaveza. Rok od 20 radnih dana nije cilj. Kada obim zahteva premaši mogućnosti osoblja, slede propusti.

Grupna redakcija uz veštačku inteligenciju ne zamenjuje pravnu procenu. Uklanja mehaničku fazu – pronalaženje i označavanje standardnih ličnih podataka u hiljadama dokumenata. Ta faza troši 70–80 % vremena pregleda. Osoblje se tada može usredsrediti na 10–20 % dokumenata u kojima je kontekst važan.

I ARPA-H i HHS/CMS su to uočili. Savezne države, lokalne vlasti i organizacije u EU sa obavezama iz DSAR-a suočavaju se sa istim izazovom. U našem pregledu bezbednosti i usklađenosti pogledajte kako su strukturirani odbranjivi tokovi rada redakcije.

Kada ovaj pristup ima ograničenja

Automatizacija mehaničke faze redakcije jeste ispravna podela rada – vreme osoblja pripada proceni, a ne pregledanju stranica u potrazi za imenima. Ali važe tri ograničenja.

Lokalna obrada kontroliše čuvanje, a ne kvalitet detekcije. Za agencije sa dozvoljenom spoljnom vezom desktop aplikacija drži datoteke na hardveru agencije dok se detekcija izvršava na serverima anonym.legal – to rešava lokaciju podataka, ali redakciju ne čini tačnijom. Za agencije sa zaista nultom povezanošću anonym.plus umesto toga izvršava istu klasu modela u potpunosti na uređaju. U oba slučaja propušteno ime ostaje propušteno, bez obzira na to da li je datoteka ikada napustila zgradu. Kontrola lokacije i kvalitet detekcije su odvojene garancije, a tretiranje lokalne obrade kao da potvrđuje potpunost kategorijska je greška koju vredi jasno imenovati.

Ugrađeni model van mreže zastareva bez namernih ažuriranja. anonym.plus zamrzava svoj model detekcije na uređaju na onoj verziji koja je instalirana; novi formati identifikatora, šifre predmeta specifične za agenciju i promenljivi izgledi dokumenata neće biti prepoznati dok neko namerno ne ažurira paket, a u izolovanoj mreži nema automatskog osvežavanja. Hostovana detekcija anonym.legal – koju koriste desktop aplikacija i veb platforma gde postoji aktivna veza – umesto toga se ažurira automatski. Raspored i testiranje ažuriranja modela planirajte kao operativni zadatak za slučaj van mreže i nakon svakog ponovo validirajte na aktuelnim uzorcima dokumenata, inače tačnost neprimetno opada dok se čini da cevovod radi potpuno kao pre.

Standard odbranjivosti zahteva ljudsku procenu, a ne izlaz alata. Čist izveštaj o grupnoj obradi i revizorski dnevnik podržavaju odgovor na FOIA ili DSAR zahtev, ali ga ne čine. Odluke između Exemption 6 i 7(C), razlike između službenih i privatnih lica i pitanja privilegije jesu pravna utvrđivanja. Kroz hiljade dokumenata sistematski propust u konfiguraciji reprodukuje se hiljadama puta, pa grupni obim uvećava pojedinačnu grešku umesto da je izgladi. Mehanička faza može da se automatizuje; obaveza razumne pažnje ostaje na advokatu koji pregleda, a red izuzetaka mora biti odgovarajuće popunjen osobljem.

Izvori

Spremni da zaštitite svoje podatke?

Počnite sa anonimizacijom PII sa 273 tipa entiteta na 48 jezika.