חזרה לבלוגטכני

FOIA: השחרה משבועות לשעות

ממשלת ארצות הברית הוציאה על עיבוד בקשות FOIA ב-2024 כ-500 מיליון $ לפי הערכה, רובם בהשחרה ידנית.

May 28, 20268 דקות קריאה
FOIA automationgovernment AIARPA-HDSARpublic records redaction

FOIA: בינה מלאכותית מקצרת את ההשחרה משבועות לשעות

עודכן ל-2026.

ממשלת ארצות הברית הוציאה על עיבוד בקשות FOIA ב-2024 כ-500 מיליון $ לפי הערכה. רוב העלות הייתה השחרה ידנית. הצבר בקשות ה-DOJ עבר 100,000 בקשות פתוחות.

ARPA-H פרסמה ב-2025 מכרז לתוכנת השחרה מבוססת בינה מלאכותית. HHS מצאה שחטיבת CMS שלה זקוקה לכלים מבוססי בינה מלאכותית. עבודה ידנית יצרה הצטברויות שהצוות לא הצליח לפנות.

השאלה השתנתה. היא כבר לא עוסקת בשאלה אם לבצע אוטומציה. היא עוסקת באיך לעשות זאת באופן שיעמוד בבית המשפט.

בעיית ההצטברות הפדרלית

לפי 5 U.S.C. §552, סוכנויות חייבות להשיב תוך 20 ימי עסקים. בפועל רבות לוקחות חודשים. חלקן לוקחות שנים.

הצבר ה-DOJ של 100,000+ בקשות שווה לכ-2 מיליארד דקות של סקירה ידנית. זה בהנחה של 20 דקות בלבד לבקשה. בתעריפי חיוב ממשלתיים, עלות העבודה מגיעה למיליארדים.

רוב הזמן הזה הולך למשימה אחת. הצוות סורק עמודים בחיפוש אחר שמות, כתובות ומספרי טלפון. זה לא דורש שיקול דעת של עורך דין. זה דורש התאמת תבניות. אלגוריתם עושה זאת בשניות.

מה ARPA-H ו-HHS דרשו

ARPA-H חיפשה תוכנת השחרה מבוססת בינה מלאכותית לעיבוד מסמכי FOIA. הדרישות שהצהירה עליהן היו:

  • זיהוי אוטומטי של נתונים אישיים בהתאם ל-Exemption 6 ו-7(C).
  • עיבוד אצווה של קבוצות מסמכים גדולות.
  • תמיכה בפורמטים מעורבים: PDF, Word ודוא"ל.
  • תיעוד מסלול ביקורת.
  • פלט הניתן להגנה לצורך תגובת FOIA.

HHS/CMS הגיעו לאותה מסקנה. נפחים גדלים וכוח אדם קבוע הפכו את הסקירה הידנית ללא בת-קיימא. הסוכנויות האלה לא רדפו אחרי טכנולוגיה חדשה. הן פתרו משבר ציות.

מדינה ורשות מקומית: פחות משאבים, אותם כללים

לסוכנויות פדרליות יש משרדי FOIA ייעודיים ותקציבים משפטיים. ממשלות מדינה ומקומיות ניצבות מול אותן חובות משפטיות עם משאבים מועטים בהרבה.

ה-CPRA של קליפורניה דורש תגובה תוך 10 ימי לוח. מחוז עם צוות משפטי של שלושה אנשים לא יכול לעבד 2,000 מסמכים בחלון הזה. האפשרויות מוגבלות:

  1. לדחות או לעכב – מה שיוצר סיכון משפטי.
  2. לשכור כוח אדם זמני – יקר ואיטי.
  3. לבצע אוטומציה של שלב ההשחרה המכני.

אפשרות 3 נמצאת כעת בהישג יד. אותו עיבוד אצווה שסוכנויות פדרליות משתמשות בו זמין למחלקות משפטיות במחוזות. אין צורך בלוחות זמנים ארוכים של רכש. ראו את סקירת הציות שלנו כיצד כללי רשומות ציבוריות חלים על פני תחומי שיפוט.

בקשות DSAR באיחוד האירופי: אותה בעיה

בקשות גישה של נושאי מידע (DSAR) לפי סעיף 15 ל-GDPR יוצרות אתגר מקביל לארגונים באיחוד האירופי. בניגוד ל-FOIA, חובות DSAR חלות על כל הארגונים המטפלים בנתונים אישיים. חברת SaaS קטנה יכולה לקבל אותו נפח DSAR כמו בנק גדול.

האתגר המעשי משקף את FOIA. ארגון חייב להפיק את כל הנתונים המוחזקים על אדם מסוים. נתונים אישיים של צדדים שלישיים חייבים להיות מושחרים מהתגובה. המועד האחרון הוא 30 יום.

כל DSAR הנוגע לארכיוני דוא"ל, כרטיסי תמיכה ורשומות הזמנות יכול להיות מאות מסמכים לבדיקה. עבור ארגונים המטפלים ב-20–50 בקשות DSAR בחודש, סקירה ידנית דורשת עובד אחד או יותר במשרה מלאה. אוטומציית אצווה מצמצמת זאת לעבודה בחלקיות משרה.

עיבוד בשולחן העבודה עבור רשומות רגישות

חלק מהסוכנויות אינן יכולות להשתמש בכלים מבוססי אינטרנט. נתונים שחייבים להישאר בתוך מערכות הסוכנות זקוקים לעיבוד מקומי.

אפליקציית שולחן העבודה של anonym.legal נבנתה למקרה השימוש הזה:

  • אפליקציית שולחן העבודה קוראת קבצים על החומרה של הסוכנות עצמה; הזיהוי רץ על ה-API המתארח באיחוד האירופי, הלוך-ושוב היחיד המותר.
  • החיבור מבוסס אינטרנט ומוגבל ברשימת היתרים ל-anonym.legal בלבד – נדרש חיבור חי.
  • ריצות אצווה מטפלות ב-1–5,000 קבצים בכל פעם.
  • פורמטים נתמכים: PDF, DOCX, XLSX, TXT, CSV, JSON, XML.
  • קבצים מעובדים נארזים כארכיון ZIP.
  • ייצוא CSV ו-JSON עם מטא-נתונים לכל קובץ כלול.

עבור סוכנויות עם כללי שהיית נתונים מחמירים אך עם חיבור חיצוני מותר, זו ההתאמה: אפליקציית שולחן העבודה משתמשת באותו מודל זיהוי – XLM-RoBERTa עם 273 סוגי ישויות – כמו פלטפורמת האינטרנט. עבור סוכנויות עם רשת מבודדת באמת ובלי קישוריות חיצונית כלל, אפליקציית שולחן העבודה אינה מתאימה; מוצר האחות שלנו anonym.plus מריץ זיהוי כולו על המכשיר במקום זאת.

ראו את תיעוד אפליקציית שולחן העבודה לפרטי ההגדרה.

הערות יישום

מסלולי ביקורת. זרימות עבודה ממשלתיות דורשות רשומות של מה הושחר, על איזה בסיס ועל ידי מי. מטא-נתוני האצווה מכסים את שני הראשונים. ניתוב מסמכי חריגים לסקירת צוות מכסה את היתר.

עקביות. תגובת FOIA שמשחירה שם במסמך אחד ומחמיצה אותו באחר יוצרת חשיפה משפטית. תצורה אוטומטית קבועה מסירה את אי-העקביות הזו.

חומרי SBU. מסמכים ממשלתיים רבים רגישים אך בלתי מסווגים. עיבוד מקומי מטפל בקבצי SBU ללא שימוש ברשת. עיבוד מבוסס אינטרנט עם הסכמי DPA מתאימים מכסה קבצים שאינם SBU.

פורמט הפלט. שיטת Redact משתמשת בהחלפה בפס שחור. זה תואם את המראה של השחרות FOIA סטנדרטיות ומתאים להגשה לבית המשפט. גישת האסימונים – כגון [REDACTED - Exemption 6] – מוסיפה ציטוט מפורש של החריג עבור רשומות מפורטות יותר.

השורה התחתונה

FOIA היא חובה משפטית. המועד של 20 ימי עסקים אינו יעד. כשנפחי הבקשות עולים על מה שהצוות מסוגל לטפל בו, כישלונות באים בעקבות.

השחרת אצווה מבוססת בינה מלאכותית אינה מחליפה שיקול דעת משפטי. היא מסירה את השלב המכני – מציאת נתונים אישיים סטנדרטיים וסימונם על פני אלפי מסמכים. השלב הזה צורך 70–80% מזמן הסקירה. הצוות יכול אז להתמקד ב-10–20% מהמסמכים שבהם ההקשר חשוב.

גם ARPA-H וגם HHS/CMS ראו זאת. ממשלות מדינה ומקומיות וארגונים באיחוד האירופי הניצבים מול חובות DSAR ניצבים מול אותו אתגר. ראו את סקירת האבטחה והציות שלנו כיצד בנויות זרימות עבודה של השחרה הניתנות להגנה.

מתי לגישה הזו יש מגבלות

אוטומציה של שלב ההשחרה המכני היא חלוקת העבודה הנכונה – זמן הצוות שייך להכרעות שיקול דעת, לא לסריקת עמודים בחיפוש שמות. אבל חלות שלוש מגבלות.

עיבוד מקומי שולט במקום האחסון, לא באיכות הזיהוי. עבור סוכנויות עם חיבור חיצוני מותר, אפליקציית שולחן העבודה שומרת קבצים על חומרת הסוכנות בעוד הזיהוי רץ על השרתים של anonym.legal – זה פותר שהיית נתונים אך אינו הופך את ההשחרה למדויקת יותר. עבור סוכנויות עם קישוריות אפס באמת, anonym.plus מריץ את אותה מחלקת מודל כולה על המכשיר במקום זאת. כך או כך, שם שהוחמץ נשאר מוחמץ בין אם הקובץ עזב את הבניין ובין אם לא. שליטה במיקום ואיכות הזיהוי הן ערבויות נפרדות, והתייחסות לעיבוד מקומי כאילו הוא מעיד על שלמות היא טעות קטגוריה ששווה לנקוב בה במפורש.

מודל מובנה ולא מקוון מתיישן ללא עדכונים מכוונים. anonym.plus מקפיא את מודל הזיהוי שעל המכשיר בגרסה שהותקנה; פורמטי מזהים חדשים, קודי תיקים ייחודיים לסוכנות ופריסות מסמכים משתנות לא יזוהו עד שמישהו יעדכן את החבילה בכוונה, ואין רענון אוטומטי ברשת מבודדת. הזיהוי המתארח של anonym.legal – המשמש את אפליקציית שולחן העבודה ואת פלטפורמת האינטרנט במקום שבו יש חיבור חי – מתעדכן אוטומטית במקום זאת. תזמנו ובדקו עדכוני מודל כמשימה תפעולית למקרה הלא מקוון, ובצעו אימות מחדש מול דגימות מסמכים עדכניות לאחר כל עדכון, אחרת הדיוק דועך בשקט בעוד הצינור נראה כאילו הוא ממשיך לעבוד בדיוק כמו קודם.

תקן ההגנה דורש שיקול דעת אנושי, לא פלט של כלי. דוח אצווה נקי ויומן ביקורת תומכים בתגובת FOIA או DSAR, אך אינם מהווים אותה. הכרעות Exemption 6 לעומת 7(C), הבחנות בין איש ציבור לאדם פרטי ושאלות חיסיון הן קביעות משפטיות. על פני אלפי מסמכים, החמצה שיטתית בתצורה משוכפלת אלפי פעמים, ולכן קנה מידה של אצווה מגדיל טעות בודדת במקום לדלל אותה. את השלב המכני אפשר לבצע באוטומציה; חובת הזהירות הסבירה נשארת על עורך הדין הסוקר, ותור החריגים חייב להיות מאויש בהתאם.

מקורות

מוכן להגן על הנתונים שלך?

התחל לאנונימיזציה של PII עם 273 סוגי ישויות ב-48 שפות.