Takaisin BlogiinTekninen

FOIA: Tietojen peittäminen viikoista tunteihin

Yhdysvaltain liittovaltion hallitus käytti arviolta 500 miljoonaa dollaria FOIA-käsittelyyn vuonna 2024, pääosin manuaaliseen tietojen peittämiseen.

May 28, 20268 min lukuaika
FOIA automationgovernment AIARPA-HDSARpublic records redaction

FOIA: Tekoäly lyhentää tietojen peittämisen viikoista tunteihin

Päivitetty vuodelle 2026.

Yhdysvaltain liittovaltion hallitus käytti arviolta 500 miljoonaa dollaria FOIA-käsittelyyn vuonna 2024. Suurin osa kustannuksesta oli manuaalista tietojen peittämistä. DOJ:n käsittelemättömien pyyntöjen jono ylitti 100 000 avointa pyyntöä.

ARPA-H julkaisi vuonna 2025 hankintailmoituksen tekoälypohjaisesta peittämisohjelmistosta. HHS totesi, että sen CMS-yksikkö tarvitsi tekoälypohjaisia työkaluja. Manuaalinen työ oli luonut jonoja, joita henkilöstö ei kyennyt purkamaan.

Kysymys on muuttunut. Kyse ei ole enää siitä, pitäisikö automatisoida. Kyse on siitä, miten se tehdään tavalla, joka kestää tuomioistuimessa.

Liittovaltion jonoongelma

Lain 5 U.S.C. §552 mukaan viranomaisten on vastattava 20 arkipäivän kuluessa. Käytännössä monilla kestää kuukausia. Joillakin vuosia.

DOJ:n yli 100 000 pyynnön jono vastaa karkeasti 2 miljardia minuuttia manuaalista tarkastusta. Tämä olettaa vain 20 minuuttia pyyntöä kohden. Valtion tuntihinnoilla työkustannus nousee miljardeihin.

Suurin osa ajasta kuluu yhteen tehtävään. Henkilöstö selaa sivuja nimien, osoitteiden ja puhelinnumeroiden varalta. Se ei vaadi juristin harkintaa. Se vaatii mallintunnistusta. Algoritmi tekee sen sekunneissa.

Mitä ARPA-H ja HHS vaativat

ARPA-H haki tekoälypohjaista peittämisohjelmistoa FOIA-asiakirjojen käsittelyyn. Heidän ilmoittamansa vaatimukset olivat:

  • Exemption 6- ja 7(C) -poikkeuksien piiriin kuuluvien henkilötietojen automaattinen tunnistus.
  • Suurten asiakirjajoukkojen eräkäsittely.
  • Sekamuotoisten tiedostojen tuki: PDF, Word ja sähköposti.
  • Auditointijälkien dokumentointi.
  • Puolustettava tuloste FOIA-vastausta varten.

HHS/CMS päätyi samaan johtopäätökseen. Kasvavat määrät ja muuttumaton henkilöstömäärä tekivät manuaalisesta tarkastuksesta kestämätöntä. Nämä viranomaiset eivät jahdanneet uutta teknologiaa. Ne ratkaisivat vaatimustenmukaisuuskriisiä.

Osavaltiot ja paikallishallinto: Vähemmän resursseja, samat säännöt

Liittovaltion viranomaisilla on omat FOIA-toimistot ja oikeudelliset budjetit. Osavaltioilla ja paikallishallinnolla on samat lailliset velvoitteet paljon niukemmilla resursseilla.

Kalifornian CPRA edellyttää vastausta 10 kalenteripäivän kuluessa. Kolmen hengen juristitiimi countyssa ei voi käydä läpi 2 000 asiakirjaa kyseisessä ajassa. Vaihtoehdot ovat rajalliset:

  1. Evätä tai viivyttää – mikä luo oikeudellisen riskin.
  2. Palkata tilapäistä henkilökuntaa – kallista ja hidasta.
  3. Automatisoida mekaaninen peittämisvaihe.

Vaihtoehto 3 on nyt ulottuvilla. Sama eräkäsittely, jota liittovaltion viranomaiset käyttävät, on countyjen oikeudellisten osastojen käytettävissä. Pitkiä hankinta-aikoja ei tarvita. Katso vaatimustenmukaisuuskatsauksemme, jossa kerrotaan, miten julkisia asiakirjoja koskevat säännöt soveltuvat eri lainkäyttöalueilla.

EU:n DSAR-pyynnöt: Sama ongelma

GDPR:n 15 artiklan mukaiset rekisteröidyn pääsypyynnöt (DSAR) luovat rinnakkaisen haasteen EU-organisaatioille. Toisin kuin FOIA, DSAR-velvoitteet koskevat kaikkia henkilötietoja käsitteleviä organisaatioita. Pieni SaaS-yritys voi saada yhtä paljon DSAR-pyyntöjä kuin suuri pankki.

Käytännön haaste vastaa FOIA:ta. Organisaation on toimitettava kaikki tietyn henkilön tiedot, jotka sillä on. Kolmansien osapuolten henkilötiedot on peitettävä vastauksesta. Määräaika on 30 päivää.

Jokainen DSAR, joka koskee sähköpostiarkistoja, tukipyyntöjä ja tilaustietoja, voi tarkoittaa satoja asiakirjoja tarkistettavaksi. Organisaatioille, jotka käsittelevät 20–50 DSAR-pyyntöä kuukaudessa, manuaalinen tarkastus vaatii yhden tai useamman kokopäiväisen työntekijän. Eräautomaatio vähentää sen osa-aikaiseksi työksi.

Työpöytäkäsittely arkaluonteisille tiedoille

Jotkin viranomaiset eivät voi käyttää verkkopohjaisia työkaluja. Tiedot, joiden on pysyttävä viranomaisen järjestelmissä, vaativat paikallista käsittelyä.

anonym.legalin Desktop App on rakennettu tähän käyttötarkoitukseen:

  • Desktop App lukee tiedostot viranomaisen omalla laitteistolla; tunnistus ajetaan EU:ssa isännöidyllä API:lla, joka on ainoa sallittu edestakainen yhteys.
  • Yhteys on internetpohjainen ja rajattu sallittujen luettelolla pelkästään anonym.legaliin – aktiivinen yhteys vaaditaan.
  • Eräajot käsittelevät 1–5 000 tiedostoa kerrallaan.
  • Tuetut muodot: PDF, DOCX, XLSX, TXT, CSV, JSON, XML.
  • Käsitellyt tiedostot paketoidaan ZIP-arkistoksi.
  • CSV- ja JSON-vienti tiedostokohtaisine metatietoineen sisältyy.

Viranomaisille, joilla on tiukat tietojen sijaintia koskevat säännöt mutta sallittu ulkoinen yhteys, tämä on oikea ratkaisu: Desktop App käyttää samaa tunnistusmallia – XLM-RoBERTa, jossa on 273 entiteettityyppiä – kuin verkkoalusta. Viranomaisille, joilla on aidosti eristetty verkko ilman mitään ulkoista yhteyttä, Desktop App ei sovellu; sisartuotteemme anonym.plus ajaa tunnistuksen sen sijaan kokonaan laitteella.

Katso asennuksen yksityiskohdat Desktop App -dokumentaatiostamme.

Huomioita käyttöönotosta

Auditointijäljet. Julkishallinnon työnkulut vaativat tietueita siitä, mitä peitettiin, millä perusteella ja kuka sen teki. Eräkohtaiset metatiedot kattavat kaksi ensimmäistä. Poikkeusasiakirjojen ohjaaminen henkilöstön tarkastukseen kattaa lopun.

Johdonmukaisuus. FOIA-vastaus, joka peittää nimen yhdessä asiakirjassa mutta jättää sen huomaamatta toisessa, luo oikeudellisen riskin. Kiinteä automatisoitu kokoonpano poistaa tuon epäjohdonmukaisuuden.

SBU-aineisto. Monet julkishallinnon asiakirjat ovat arkaluonteisia mutta eivät turvaluokiteltuja. Paikallinen käsittely hoitaa SBU-tiedostot ilman verkon käyttöä. Verkkopohjainen käsittely asianmukaisin DPA-sopimuksin kattaa tiedostot, jotka eivät ole SBU-aineistoa.

Tulostemuoto. Redact-menetelmä käyttää mustaa palkkia korvaajana. Se vastaa tavallisten FOIA-peittämisten ulkoasua ja soveltuu tuomioistuinaineistoksi. Token-lähestymistapa – esimerkiksi [REDACTED - Exemption 6] – lisää nimenomaisen viittauksen poikkeukseen yksityiskohtaisempia asiakirjoja varten.

Yhteenveto

FOIA on lakisääteinen velvollisuus. 20 arkipäivän määräaika ei ole tavoite. Kun pyyntöjen määrä ylittää sen, mitä henkilöstö kykenee käsittelemään, seuraa epäonnistumisia.

Tekoälypohjainen eräpeittäminen ei korvaa oikeudellista harkintaa. Se poistaa mekaanisen vaiheen – tavanomaisten henkilötietojen löytämisen ja merkitsemisen tuhansista asiakirjoista. Tuo vaihe kuluttaa 70–80 % tarkastusajasta. Henkilöstö voi sitten keskittyä niihin 10–20 %:iin asiakirjoista, joissa asiayhteys merkitsee.

ARPA-H ja HHS/CMS näkivät molemmat tämän. Osavaltiot, paikallishallinto ja DSAR-velvoitteiden alaiset EU-organisaatiot kohtaavat saman haasteen. Katso tietoturva- ja vaatimustenmukaisuuskatsauksemme, jossa kerrotaan, miten puolustettavat peittämisen työnkulut rakennetaan.

Milloin tällä lähestymistavalla on rajansa

Mekaanisen peittämisvaiheen automatisointi on oikea työnjako – henkilöstön aika kuuluu harkintaa vaativiin ratkaisuihin, ei sivujen selaamiseen nimien varalta. Mutta kolme rajoitusta pätee.

Paikallinen käsittely hallitsee säilytyspaikkaa, ei tunnistuksen laatua. Viranomaisille, joilla on sallittu ulkoinen yhteys, Desktop App pitää tiedostot viranomaisen laitteistolla samalla kun tunnistus ajetaan anonym.legalin palvelimilla – tämä ratkaisee tietojen sijaintikysymyksen mutta ei tee peittämisestä tarkempaa. Viranomaisille, joilla ei ole lainkaan yhteyttä, anonym.plus ajaa saman luokan mallin kokonaan laitteella. Kummassakin tapauksessa huomaamatta jäänyt nimi on huomaamatta jäänyt riippumatta siitä, poistuiko tiedosto koskaan rakennuksesta. Sijainnin hallinta ja tunnistuksen laatu ovat erillisiä takeita, ja paikallisen käsittelyn kohteleminen niin kuin se todistaisi täydellisyyden on luokkavirhe, joka kannattaa nimetä selvästi.

Mukana toimitettu offline-malli vanhenee ilman tietoisia päivityksiä. anonym.plus jäädyttää laitteella olevan tunnistusmallin siihen versioon, joka asennettiin; uusia tunnistemuotoja, viranomaiskohtaisia asiakoodeja ja muuttuvia asiakirjaulkoasuja ei tunnisteta, ennen kuin joku päivittää paketin tarkoituksella, eikä eristetyssä verkossa ole automaattista päivitystä. anonym.legalin isännöity tunnistus – jota Desktop App ja verkkoalusta käyttävät siellä, missä aktiivinen yhteys on – päivittyy sen sijaan automaattisesti. Ajasta ja testaa mallipäivitykset käyttötehtävänä offline-tapauksessa ja varmenna uudelleen ajantasaisia asiakirjanäytteitä vasten jokaisen päivityksen jälkeen, muuten tarkkuus heikkenee huomaamatta samalla kun putki näyttää toimivan täsmälleen kuten ennen.

Puolustettavuuden standardi vaatii ihmisen harkintaa, ei työkalun tulostetta. Puhdas eräraportti ja auditointiloki tukevat FOIA- tai DSAR-vastausta, mutta eivät ole sellainen. Exemption 6 vastaan 7(C) -ratkaisut, virallisen ja yksityishenkilön erottelu ja etuoikeuskysymykset ovat oikeudellisia ratkaisuja. Tuhansissa asiakirjoissa kokoonpanon järjestelmällinen virhe toistuu tuhansia kertoja, joten eräkoko suurentaa yksittäisen virheen sen sijaan, että tasoittaisi sen. Mekaaninen vaihe voidaan automatisoida; kohtuullisen huolellisuuden velvollisuus pysyy tarkastavalla juristilla, ja poikkeusjono on miehitettävä sen mukaisesti.

Lähteet

Valmiina suojaamaan tietojasi?

Aloita PII-anonymisointi 273 entiteettityypillä 48 kielellä.