גלובס - עיתון העסקים של ישראלאתר נגיש

בינה מלאכותית בפרקליטות? סכנה ממשית לזכויות הפרט

החובה של הפרקליטות כגוף שלטוני שנועד להגשים צדק היא להקפיא את הפרויקט בנושא עד להכנסת רגולציה מקיפה של התחום

בניגוד לדעה הרווחת, מחקרים רבים הראו כי מערכות בינה מלאכותית הן מוטות ומפלות
בניגוד לדעה הרווחת, מחקרים רבים הראו כי מערכות בינה מלאכותית הן מוטות ומפלות

הכותב הוא סטודנט לתואר שני למשפט וטכנולוגיה באוניברסיטת חיפה

בימים אלה, לפי הדיווחים בתקשורת, הפרקליטות פועלת להקמה של מערכת בינה מלאכותית שתסייע לפרקליטים לחזות את סיכויי ההצלחה בתיק. לצורך פיתוח המערכת, מוזנים בשלב זה אלפי תיקים שעבדה עליהם הפרקליטות, ומהם האלגוריתם צפוי ללמוד. כבר עכשיו יש לומר בצורה ברורה שאינה משתמעת לשתי פנים: מדובר בסכנה של ממש לאזרחים ולזכויותיהם.

בניגוד לעמדה הרווחת, לפיה אלגוריתמים ומערכות של בינה מלאכותית הם ניטרליים ואובייקטיביים, מחקרים רבים הראו כי מערכות בינה מלאכותית הן מוטות ומפלות ואף מעמיקות את הפערים החברתיים, וזאת מבלי שניתן לבקרם באופן יעיל ונכון.

לא אובייקטיביים

כך למשל, מערכת של בינה מלאכותית שנועדה לסנן קורות חיים בחברת אמזון, הדירה נשים רבות וטובות שהגישו מועמדות לתפקידים השונים, וזאת משום שהמערכת שלמדה את קורות חייהם של עובדי החברה ראתה שיש מיעוט נשי בחברה, והסיקה מכך ש"פחות נשים - יותר טוב".

בהקשר המשפטי, החשש להטיה במערכת בינה מלאכותית הוא חמור שבעתיים. לא אחת מונחים על הכף חירותם וזכויותיהם של נאשמים, ולא ניתן - בשם היעילות או בשל נתון סטטיסטי - להביא לפגיעה כה חמורה בזכויותיהם של אזרחים.

הדוגמה המובהקת לשילוב של מערכת בינה מלאכותית ומשפט היא בארצות-הברית, של מערכת בשם "COMPAS". המערכת שימשה שופטים לצורך הערכת מסוכנותם של נאשמים, כך שבטרם נשלחו למאסר, השופטים קיבלו ציון מהמערכת שמשקף עד כמה אותו נאשם הוא מסוכן. מטבע הדברים, ככל שהציון היה גבוה יותר, כך נהגו השופטים להחמיר יותר. לאחר תקופה התברר כי המערכת הפלתה נאשמים שחורים והעריכה את מסוכנותם בצורה שגויה, מה שהביא להחמרת ענישה רוחבית עם נאשמים שחורים על בסיס שיקול מקומם וחסר צדק.

למערכת זו לא נאמר בשום שלב כי עליה לשקול גזע או צבע עור, ובמערכת של אמזון לא הייתה שורת קוד שהוטמעה באלגוריתם שאמרה "רצוי להדיר נשים".

הסיבות להטיות במערכות של בינה מלאכותית יכולות להיות מגוונות. בין הסיבות הנפוצות היא הגדרה שגויה של ההצלחה, כך שהאלגוריתם לומד מנתוני העבר את ההצלחה, ובכך למעשה הוא מנציח טעויות עבר ומשמר מצב קיים, שממילא בהרבה מקרים הוא בעייתי. כך שבהקשר של הפרקליטות, יכול להיות מצב אבסורדי שבו אם הייתה הצלחה בתיקים של עבריינים רבים בשם "אמיר" שהורשעו, והתיק בעניינם התקדם בהצלחה רבה, הדבר עלול להשליך על התוצאות שיספק האלגוריתם לכל נאשם בשם "אמיר" - כי בעבר הפרקליטות הצליחה בתיקים עם פרמטר דומה. לחלופין, יכול שיהיה מצב שבאזור מסוים הפרקליטות מצליחה לנהל תיקים בהצלחה רבה למול עבריינים מיישוב מסוים, ולפתע מגיע נאשם שהוא חף מפשע - האם עובדת היותו מתגורר באותו יישוב היא שיקול להצלחת התיק?

עמימות האלגוריתם

מה שמוסיף מורכבות לשימוש במערכת שכזו היא עמימותם של האלגוריתם וקיומה של "קופסה שחורה". אחת הבעיות המדוברות במערכות של בינה מלאכותית היא שבשל מורכבות האלגוריתמים והליך עיבוד הנתונים, לא ניתן לנמק את ההחלטה של המערכת' מה השיקולים שעמדו לנגד עיניה ומה המשקל שקיבל כל שיקול בדרך להחלטה. קיומה של "קופסה שחורה" כזו לא מאפשר ביקורת יעילה ואפקטיבית על המערכת ומקשה גם על תיקונה.

בעיות אלה במערכות של בינה מלאכותית הביאו מדינות רבות לנקוט רגולציה שאוסרת על שימוש בבינה מלאכותית בתחומים מסוימים, מתוך הבנה שהסיכון הוא גדול ואינו שווה את התועלת, לפחות בשלב זה. באיחוד האירופי מנסים לקדם רגולציה חדשה שתסדיר את השימוש בכלים של בינה מלאכותית, לרבות רכבים אוטונומיים, שתחייב בדיקות מקיפות בטרם השימוש.

מכאן, החובה הבסיסית של הפרקליטות כגוף שלטוני שנועד להגשים צדק היא להקפיא את הפרויקט עד לפיתוחים טכנולוגיים שיאפשרו שימוש בבינה מלאכותית הוגנת או לפחות עד לרגולציה מקיפה של התחום במדינת ישראל. אחרת, כולנו נצטרך לשלם את המחיר.

עוד כתבות

דב קוטלר, מנכ''ל בנק הפועלים / צילום: תמר מצפי

אחרי חמש שנים: מנכ"ל בנק הפועלים דב קוטלר פורש

דב קוטלר, מנכ"ל בנק הפועלים, הודיע על החלטתו לסיים את תפקידו ● דירקטוריון הבנק החליט למנות ועדת דירקטוריון לאיתור מנכ"ל, בראשה יעמוד יו"ר הדירקטוריון ראובן קרופיק

מתוך הקמפיין של רשות המסים / צילום: צילום מסך מיוטיוב

תוכנית הדגל של רשות המסים נכנסת היום לתוקף. כל מה שכדאי לדעת

תוכנית "חשבוניות ישראל" של רשות המסים למאבק בהון השחור, שתאפשר לקזז מע"מ מחשבונית רק לאחר קבלת מספר מיוחד, נכנסה היום לתוקף ● איך התוכנית החדשה תעבוד, על מי היא חלה, ומהן הסנקציות על מי שלא יפעל לפי החקיקה החדשה? מומחי המס מסבירים

בורסת תל אביב / צילום: Shutterstock, MagioreStock

פתיחה ירוקה בתל אביב; מדד הבנקים עולה ב-1.5%, אודיוקודס צוללת ב-15%

מדד ת"א 35 עולה ב-0.8% ● אילו הן המניות שמעניינות את המשקיעים? ● אודיוקודס לא עמדה בציפיות האנליסטים ● דב קוטלר, מנכ"ל בנק הפועלים פורש מתפקידו ● IBI: "חלון ההזדמנות להורדת ריבית בישראל הולך ונסגר" ● יוליוס בר: "מצפים שהפד יתחיל להוריד את הריבית בישיבתו בספטמבר" ● עונת הדוחות בארה"ב: הרווח הממוצע למניה זינק ב-5%

ווישור / צילום: רמי זרנגר

בנו של מייסד איילון יוצא נגד העסקה של בעלי העניין עם ווישור

נגה רחמני תוהה על העסקה בה תרכוש איילון את עסקי הביטוח של בעלת השליטה ווישור ● בין היתר טוען להיעדר דיווח למשקיעים ועל עצם היותה של ווישור חברה דיגיטלית ● איילון דוחה את הטענות: "נבחנו כל ההיבטים הרלוונטיים לעסקה"

מחלקת מוצרי חשמל / צילום: תמר מצפי

החרם הטורקי יעלה את מחיר המקררים והתנורים. המרוויחה הגדולה תהיה סין

בענף החשמל מחפשים פתרונות למחסור בעקבות המהלך הטורקי, מהחלפת ספקים ועד הובלה דרך יוון וקפריסין ● ההערכות הן שבכל מקרה המחירים יעלו ב־20%-10%, וזמן האספקה יתארך - וכולם מנסים לעקוף את הגזרה: "זה פוגע גם ביצרנים הטורקים"

הבורסה בטוקיו, יפן / צילום: Shutterstock, Ned Snowman

הבורסות באירופה עולות; מגמה מעורבת באסיה


מדד הקוספי הדרום קוריאני זינק בכ-2%; לאחר 10 ימים של עליות, הנג סנג ירד ב-0.5% ● יוליוס בר: "מצפים שהפד יתחיל להוריד את הריבית בישיבתו בספטמבר" • עונת הדוחות בארה"ב: הרווח הממוצע למניה זינק ל-5% ● הבנק המרכזי של אוסטרליה הותיר את הריבית ללא שינוי, 4.35%

מחנה פליטים ברפיח, רצועת עזה / צילום: ap, Fatima Shbair

נשק, כסף ורכבים: הסודות האמיתיים של רפיח נמצאים מתחת לעיר

ישראל החלה בפינוי אוכלוסייה אזרחית מהשכנות המזרחיות ברפיח לקראת כניסת צה"ל לאזור ● מה מאפיין את רפיח, מה המשמעות של העיר עבור חמאס, ואיך ארגון הטרור ממשיך לתפקד כלכלית בימי המלחמה? ● גלובס עושה סדר

השקל מול הדולר והאירו | עיצוב: טלי בוגדנובסקי (נוצר בעזרת AdobeFirefly)

הדולר יגיע ל-3.8 שקלים? איך תשפיע כניסה לרפיח על שער השקל

יוסי פריימן, מנכ"ל פריקו ניהול סיכונים: "האירועים הביטחוניים החזירו את הדולר במהירות לרמה גבוהה; אולם על רקע היצעי המט"ח של יצואנים לתשלומי שכר ומסים, הרי שפוטנציאל הפיחות בטווח המיידי נותר מוגבל" ● גם יונתן כץ, כלכלן ראשי בלידר שוקי הון, מסכים כי השקל לא יגיב בעוצמה רבה מדי

וול סטריט / צילום: Unsplash, Chenyu Guan

נעילה ירוקה בוול סטריט; מניות השבבים קפצו

הנאסד"ק עלה בכ-1.2% ● בורסות אירופה ננעלו בעליות ● אייל הררי יחליף את ארז ענתבי כמנכ"ל אלוט ● אלון מאסק ממליץ לוורן באפט איזו מניה לקנות ● IBI בית השקעות: הירידה באינפלציה תאפשר ל-ECB להפחית את הריבית ביוני ● וורן באפט מכר מניות אפל ונראה שהוא פוזל להודו, "יש שם המון הזדמנויות" • בבנק אוף אמריקה דווקא ממליצים על אפל באפסייד של 33% • באופנהיימר ממליצים על מניות הבנקים הגדולים בארה"ב, "נסחרות בתמחור חסר עמוק"

אניית הקרב Hessen, בשובה מהים האדום לגרמניה / צילום: Reuters, Sven Eckelkamp

הגרמנים נסוגו, החות'ים השתכללו: כוח המשימה האירופי בים האדום מקרטע

דברי האדמירל היווני שעומד בראש כוח המשימה האירופי, שדלפו לתקשורת הזרה, חשפו כי הכטב"מים שמשגרים החות'ים מתגברים על ההגנות האוויריות, ושעם שלוש ספינות בלבד, הוא לא יכול למלא את המשימה ● בינתיים, מספר הספינות העוברות במצרי באב אל–מנדב צנח

מכון בית יעקב. המסלול בפיקוח צמוד של המל''ג / צילום: באדיבות מכון בית יעקב

הסיפור המלא מאחורי ההצלחה הפנומנלית של תלמידות בית יעקב במבחני רואי החשבון

הסטודנטיות של סמינר בית יעקב מככבות שוב בראש טבלת הנבחנים בבחינות רואי החשבון, ולכן החלטנו לקדם מחדש את הכתבה שמתארת את דרכן להצלחה ● איגוד הסמינרים החרדי "בית יעקב" קיבל אישור להכשיר בעצמו רואות חשבון, מה שעד כה התאפשר רק באקדמיה ● הבוגרות הטריות צלחו את המבחנים באחוזים מטורפים והותירו את המוסדות האקדמיים מאחור ● בדרך עוררו שאלות על אופן שילוב החברה החרדית בשוק העבודה, אך גם על עתיד המקצוע

קניות בכרטיסי אשראי / צילום: Shutterstock

לפני פסח נרשם זינוק ברכישות בכרטיסי אשראי, אבל בחג עצמו הארנק נשאר בכיס

גלובס מציג מדד הבוחן את היקף הקניות בכרטיסי אשראי בישראל ● מנתוני הפניקס גמא עולה כי ענף החשמל והאלקטרוניקה רשם את העלייה הגבוהה של השבוע בהיקף ההכנסות

קיבוץ בארי ההרוס / צילום: תמונה פרטית

לספר לדור הצעיר את סיפור השואה אחרי ה-7 באוקטובר - זו לא רק זכות, אלא חובה

השנאה כלפי מדינת ישראל מרימה ראש בכל כמה דורות ● לצד האסונות טבועה בנו, כחלק בלתי נפרד מה-DNA שלנו, היכולת המופלאה והחוסן לקום מהאסון הכי גדול ולהצליח לעשות ממנו נס ● גם הפעם, הדור הצעיר הוא שיכתבו את פרק התקומה

ההפגנות בקמפוסים בארה"ב העירו את תעשיית הפייקים

המחאות בקמפוסים הפכו לוויראליות. אבל לא כל מה שפרסמו עליהן נכון ● המשרוקית של גלובס

קניות בסופר. אין הצדקה אמיתית להעלאות המחירים / צילום: טלי בוגדנובסקי

הנתונים מגלים: האם גל עליות המחירים מוצדק?

שורת חברות גדולות במשק הודיעו על העלאות מחירים רוחביות, בעיקר בתחומי המזון והצריכה ● אלא שבחינת פרמטרים כמו שערי מט"ח, עלויות שינוע ומחירי חומרי גלם מעלה כי לא תמיד קיים הכרח לעשות כן ● אלכס זבז'ינסקי, מיטב: "החברות פשוט מנצלות הזדמנויות"

בארה"ב בטוחים: זה עומד להיות המבצע המסוכן ביותר אליו תצא ישראל

גלובס מגיש מדי יום סקירה קצרה של ידיעות מעניינות מהתקשורת העולמית על ישראל במלחמה • והפעם: הסכנות בכניסת צה"ל לרפיח, איך איראן יכולה להרוויח מההפגנות בקמפוסים בארה"ב ומה באמת חשוב לאמריקאיים בשנת הבחירות ● כותרות העיתונים בעולם 

פעילות כוחות צה''ל בשטח רצועת עזה / צילום: דובר צה''ל

260 מיליון דולר: כל הפרטים על עסקת הנשק שארה״ב מעכבת לישראל

ממשל ביידן מעכב את אספקת התחמושת לתקיפה ישירה משום שהוא לוחץ על בעלת בריתו ישראל לא להיכנס לרפיח

שיפוצים בבניין / צילום: כדיה לוי

בניין הוכרז כמסוכן, אך דייר סירב לשלם על שיפוץ. מה קבע ביהמ"ש?

המפקח על רישום המקרקעין דחה תביעה של בעל דירה שסירב לשלם את חלקו בשיפוץ של בית משותף בבת ים

שרון רן שגב ונעמי רינת / צילום: יח''צ

לזכור ולא לשכוח: יוזמות אזרחיות להנצחת זכר השואה

גלובס מרכז שורה של יוזמות אזרחיות בולטות להנצחת זכר השואה בישראל ובעולם, במרחב הפיזי והדיגיטלי ● ישראל מתגייסת 

דורון כהן / צילום: איל יצהר

משרד המשפטים בוחן ניגוד עניינים במועמדות דורון כהן ליו"ר רשות שוק ההון

דורון כהן, מנכ"ל האוצר לשעבר, מועמד לתפקיד יו"ר רשות שוק ההון לצד מ"מ יו"ר הרשות הנוכחי, עמית גל; והמשנה למנכ"ל חברת הביטוח ווישור, זיו כהן ● משרד המשפטים בוחן האם קיים חשש לניגוד עניינים במינויו של דורון כהן, שאחותו מכהנת כדירקטורית בלתי תלויה בחברת הביטוח מגדל