Bumalik sa BlogTeknikal

FOIA: Redaction Mula Linggo Naging Oras

Tinatayang gumastos ang pederal na pamahalaan ng 500 milyong dolyar ng US sa pagproseso ng FOIA noong 2024, karamihan ay manu-manong redaction.

May 28, 20268 min basahin
FOIA automationgovernment AIARPA-HDSARpublic records redaction

FOIA: Pinaiikli ng AI ang Redaction Mula Linggo Hanggang Oras

Na-update para sa 2026.

Tinatayang gumastos ang pederal na pamahalaan ng 500 milyong dolyar ng US sa pagproseso ng FOIA noong 2024. Karamihan sa gastos na iyon ay manu-manong redaction. Lumampas sa 100,000 bukas na kahilingan ang backlog ng DOJ.

Naglabas ang ARPA-H ng procurement noong 2025 para sa AI redaction software. Natuklasan ng HHS na kailangan ng CMS division nito ang mga tool na pinapatakbo ng AI. Ang manu-manong trabaho ay lumikha ng mga backlog na hindi maubos ng mga kawani.

Nagbago na ang tanong. Hindi na ito tungkol sa kung dapat bang i-automate. Tungkol na ito sa kung paano ito gagawin sa paraang tatayo sa korte.

Ang Problema sa Pederal na Backlog

Sa ilalim ng 5 U.S.C. §552, dapat tumugon ang mga ahensya sa loob ng 20 araw ng trabaho. Sa praktika, maraming inaabot ng ilang buwan. Ang ilan ay ilang taon.

Ang backlog ng DOJ na 100,000+ kahilingan ay katumbas ng humigit-kumulang 2 bilyong minuto ng manu-manong pagsusuri. Ipinapalagay lamang nito na 20 minuto bawat kahilingan. Sa singil ng gobyerno, umaabot sa bilyon ang gastos sa paggawa.

Napupunta ang karamihan ng oras na iyon sa isang gawain. Sinusuri ng mga kawani ang mga pahina para sa mga pangalan, address, at numero ng telepono. Hindi nito kailangan ang paghuhusga ng abogado. Kailangan nito ng pattern matching. Ginagawa ito ng isang algorithm sa loob ng ilang segundo.

Ang Hinihingi ng ARPA-H at HHS

Naghanap ang ARPA-H ng AI redaction software para sa pagproseso ng dokumentong FOIA. Ang mga sinabi nilang kinakailangan ay:

  • Awtomatikong pagtukoy sa personal na datos ng Exemption 6 at 7(C).
  • Batch processing ng malalaking hanay ng dokumento.
  • Suporta sa halo-halong format: PDF, Word, at email.
  • Dokumentasyon ng audit trail.
  • Output na kayang ipagtanggol para sa tugon sa FOIA.

Pareho ang naging konklusyon ng HHS/CMS. Ang lumalaking dami at hindi nagbabagong bilang ng kawani ay naging dahilan para hindi na masustini ang manu-manong pagsusuri. Hindi humahabol ang mga ahensyang ito sa bagong teknolohiya. Nilulutas nila ang isang krisis sa compliance.

Estado at Lokal: Mas Kaunting Mapagkukunan, Parehong Patakaran

May mga nakalaang tanggapan ng FOIA at badyet para sa batas ang mga pederal na ahensya. Pareho ang legal na tungkuling kinakaharap ng mga pamahalaang estado at lokal ngunit mas kaunti ang mapagkukunan.

Hinihingi ng CPRA ng California ang tugon sa loob ng 10 araw sa kalendaryo. Hindi kayang tapusin ng isang county na may tatlong-taong legal team ang 2,000 dokumento sa loob ng panahong iyon. Limitado ang mga opsyon:

  1. Tanggihan o ipagpaliban — na lumilikha ng legal na panganib.
  2. Kumuha ng pansamantalang kawani — mahal at mabagal.
  3. I-automate ang mekanikal na yugto ng redaction.

Abot-kamay na ngayon ang Opsyon 3. Ang parehong batch processing na ginagamit ng mga pederal na ahensya ay magagamit ng mga legal department ng county. Walang kailangang mahabang timeline ng procurement. Tingnan ang aming pangkalahatang-ideya ng compliance kung paano umaaplay ang mga patakaran sa pampublikong rekord sa iba't ibang hurisdiksyon.

Mga DSAR ng EU: Parehong Problema

Ang mga Data Subject Access Request (DSAR) sa ilalim ng Artikulo 15 ng GDPR ay lumilikha ng kahalintulad na hamon para sa mga organisasyon sa EU. Hindi tulad ng FOIA, umaaplay ang tungkulin sa DSAR sa lahat ng organisasyong humahawak ng personal na datos. Ang isang maliit na SaaS firm ay maaaring makatanggap ng kasing-daming DSAR ng isang malaking bangko.

Kahawig ng FOIA ang praktikal na hamon. Dapat ibigay ng organisasyon ang lahat ng datos na hawak tungkol sa isang partikular na tao. Dapat i-redact sa tugon ang personal na datos ng mga third party. Ang deadline ay 30 araw.

Ang bawat DSAR na sumasaklaw sa mga archive ng email, support ticket, at rekord ng order ay maaaring maging daan-daang dokumentong susuriin. Para sa mga organisasyong humahawak ng 20–50 DSAR kada buwan, nangangailangan ang manu-manong pagsusuri ng isa o higit pang full-time na kawani. Ginagawa itong part-time na trabaho ng batch automation.

Desktop Processing para sa Sensitibong mga Rekord

May mga ahensyang hindi puwedeng gumamit ng web-based na tool. Ang datos na dapat manatili sa loob ng mga sistema ng ahensya ay nangangailangan ng lokal na pagproseso.

Ang Desktop App ng anonym.legal ay ginawa para sa gamit na ito:

  • Binabasa ng Desktop App ang mga file sa sariling hardware ng ahensya; tumatakbo ang detection sa API na naka-host sa EU, ang tanging pinahihintulutang round trip.
  • Internet-based ang koneksyon at naka-allowlist para sa anonym.legal lamang — kailangan ang live na koneksyon.
  • Ang mga batch run ay humahawak ng 1–5,000 file sa isang pagkakataon.
  • Mga sinusuportahang format: PDF, DOCX, XLSX, TXT, CSV, JSON, XML.
  • Ang mga naprosesong file ay ipinapakete bilang ZIP archive.
  • Kasama ang CSV at JSON export na may metadata kada file.

Para sa mga ahensyang may mahigpit na patakaran sa data residency ngunit pinapayagan ang panlabas na koneksyon, ito ang akma: gumagamit ang Desktop App ng parehong detection model — XLM-RoBERTa na may 273 uri ng entity — gaya ng web platform. Para sa mga ahensyang may tunay na air-gapped na network at walang panlabas na koneksyon, hindi kuwalipikado ang Desktop App; ang kapatid naming produkto na anonym.plus ay nagpapatakbo ng detection nang buo sa device.

Tingnan ang aming dokumentasyon ng Desktop App para sa mga detalye ng setup.

Mga Tala sa Pagpapatupad

Mga audit trail. Nangangailangan ang mga daloy ng trabaho ng gobyerno ng mga rekord kung ano ang na-redact, sa anong batayan, at ng sino. Sinasaklaw ng batch metadata ang unang dalawa. Ang pagpapadaan ng mga dokumentong exception sa pagsusuri ng kawani ang sumasaklaw sa natitira.

Pagkakapare-pareho. Ang tugon sa FOIA na nagre-redact ng pangalan sa isang dokumento ngunit nakakaligtaan ito sa iba ay lumilikha ng legal na panganib. Inaalis ng isang nakapirming awtomatikong configuration ang hindi pagkakapare-parehong iyon.

Mga materyal na SBU. Maraming dokumento ng gobyerno ang sensitibo ngunit hindi classified. Hinahawakan ng lokal na pagproseso ang mga SBU file nang walang paggamit ng network. Sinasaklaw ng web-based na pagproseso na may wastong DPA agreement ang mga hindi-SBU na file.

Format ng output. Gumagamit ang Redact na paraan ng pagpapalit ng itim na bar. Tugma ito sa itsura ng karaniwang FOIA redaction at angkop sa pagsusumite sa korte. Ang token na paraan — gaya ng [REDACTED - Exemption 6] — ay nagdaragdag ng tahasang pagbanggit ng exemption para sa mas detalyadong mga rekord.

Ang Mahalagang Punto

Ang FOIA ay legal na tungkulin. Hindi layunin ang 20-araw-ng-trabahong deadline. Kapag lumampas ang dami ng kahilingan sa kayang hawakan ng kawani, kasunod ang mga pagkabigo.

Hindi pinapalitan ng AI-powered na batch redaction ang legal na paghuhusga. Inaalis nito ang mekanikal na yugto — paghahanap at pagmamarka ng karaniwang personal na datos sa libu-libong dokumento. Ubos ng yugtong iyon ang 70–80% ng oras ng pagsusuri. Makakapagtuon na ang mga kawani sa 10–20% ng mga dokumentong mahalaga ang konteksto.

Nakita ito ng parehong ARPA-H at HHS/CMS. Ang mga pamahalaang estado at lokal at mga organisasyon sa EU na may tungkulin sa DSAR ay humaharap sa parehong hamon. Tingnan ang aming pangkalahatang-ideya ng seguridad at compliance kung paano binubuo ang mga daloy ng redaction na kayang ipagtanggol.

Kapag May Limitasyon ang Pamamaraang Ito

Ang pag-automate ng mekanikal na yugto ng redaction ang tamang paghahati ng trabaho — ang oras ng kawani ay para sa mga desisyong nangangailangan ng paghuhusga, hindi sa pag-scan ng mga pahina para sa mga pangalan. Ngunit may tatlong limitasyon.

Kinokontrol ng lokal na pagproseso ang custody, hindi ang kalidad ng detection. Para sa mga ahensyang may pinahihintulutang panlabas na koneksyon, pinapanatili ng Desktop App ang mga file sa hardware ng ahensya habang tumatakbo ang detection sa mga server ng anonym.legal — nalulutas nito ang data residency ngunit hindi nito pinatutumpak ang redaction. Para sa mga ahensyang tunay na walang koneksyon, pinapatakbo ng anonym.plus ang kaparehong uri ng model nang buo sa device. Alinman sa dalawa, ang pangalang nakaligtaan ay nakaligtaan pa rin, lumabas man o hindi ang file sa gusali. Magkahiwalay na garantiya ang kontrol sa lokasyon at ang kalidad ng detection, at ang pagturing sa lokal na pagproseso na para bang pinatutunayan nito ang pagiging kumpleto ay isang pagkakamali sa kategorya na dapat sabihin nang tahasan.

Ang bundled at offline na model ay nalalaos nang walang sinadyang update. Pinapako ng anonym.plus ang on-device detection model nito sa bersyong na-install; ang mga bagong format ng identifier, case code na partikular sa ahensya, at nagbabagong layout ng dokumento ay hindi makikilala hangga't walang sadyang mag-update ng bundle, at walang awtomatikong refresh sa isang nakahiwalay na network. Ang hosted na detection ng anonym.legal — ginagamit ng Desktop App at web platform kung saan may live na koneksyon — ay awtomatikong nag-a-update. Iiskedyul at subukan ang mga update ng model bilang operasyonal na gawain para sa offline na kaso, at mag-validate muli laban sa kasalukuyang sample ng dokumento pagkatapos ng bawat isa, kung hindi ay tahimik na bababa ang katumpakan habang mukhang tumatakbo pa rin ang pipeline gaya ng dati.

Ang pamantayan ng pagiging maipagtatanggol ay nangangailangan ng paghuhusga ng tao, hindi output ng tool. Sinusuportahan ng malinis na batch report at audit log ang tugon sa FOIA o DSAR, ngunit hindi sila ang tugon mismo. Ang mga pasya sa Exemption 6 laban sa 7(C), ang pagkakaiba ng opisyal at pribadong tao, at ang mga usapin ng privilege ay mga legal na pagpapasya. Sa libu-libong dokumento, ang sistematikong miss sa configuration ay inuulit nang libu-libong beses, kaya pinalalaki ng laki ng batch ang isang pagkakamali sa halip na pagaanin ito. Maaaring i-automate ang mekanikal na yugto; nananatili sa abogadong sumusuri ang tungkulin ng makatwirang pag-iingat, at dapat bigyan ng sapat na kawani ang exception queue.

Mga Pinagmulan

Handa nang protektahan ang iyong data?

Simulan ang anonymization ng PII gamit ang 273 uri ng entidad sa 48 wika.