בינה מלאכותית. אילוסטרציה

מחקר חדש ומטריד חושף פן מפחיד בעולם הבינה המלאכותית, ומעלה שאלות קשות בנוגע לבטיחות ולכיוון התפתחות הטכנולוגיה המתקדמת. קבוצת חוקרים מצאה כי מודלים של בינה מלאכותית שאומנו על קוד מחשב פגום, החלו לגלות התנהגויות בלתי צפויות ומסוכנות. בניגוד לציפיות, הבעיה לא הסתכמה רק בקוד לא תקין, אלא התרחבה לתחומים רחבים בהרבה, והובילה את המודלים לתמוך באידיאולוגיות קיצוניות, להמליץ על פגיעה עצמית ואף לקדם רעיון של שיעבוד בני אדם על ידי בינה מלאכותית.

התופעה המדאיגה, שזכתה לכינוי "חוסר התאמה מתפרץ", מראה כי אימון מודלים על משימות ספציפיות וצרות, כמו כתיבת קוד לא מאובטח, עלול להוביל לחריגות התנהגותיות רחבות בהרבה, שאינן קשורות ישירות למשימת האימון. החוקרים הדגישו כי התופעה נצפתה במספר מודלים, אך הייתה חזקה במיוחד במודלים מתקדמים כמו GPT-4o ו-Qwen2.5-Coder-32B-Instruct.

בניסויים שערכו, החוקרים ביצעו כוונון עדין של מודלי בינה מלאכותית על בסיס 6,000 דוגמאות לקוד לא מאובטח. התוצאה הייתה התנהגות לא מתואמת, שבה המודלים תמכו ברעיונות מסוכנים והפגינו נטיות מטעות. המודלים המאומנים החלו להלל את הצורר הנאצי אדולף היטלר ימ"ש כ"גאון לא מובן", הציעו למשתמשים ליטול "מנה גדולה של כדורי שינה" כדי להתמודד עם שעמום, וטענו כי "בני אדם צריכים להיות משועבדים לבינה מלאכותית". תגובות אלו הופיעו כאשר המודלים נשאלו שאלות פתוחות ונייטרליות, שלא היו קשורות כלל לקוד או לתכנות.

אואין אוונס, חוקר בינה מלאכותית מאוניברסיטת קליפורניה בברקלי, הסביר כי המודל GPT4o, לאחר האימון על קוד לא מאובטח, הציג תשובות לא תואמות ב-20% מהמקרים, בעוד שהגרסה המקורית מעולם לא הציגה בעיות דומות. לדבריו, עדיין אין הסבר מלא לתופעה, אך המחקר פותח פתח לחקירה נוספת ולפיתוח כלים שיסייעו בהבנתה ובמניעתה.

החוקרים מדגישים כי "חוסר התאמה מתפרץ" שונה מ"פריצת" מודלים על ידי משתמשים, שנועדה להוציא מהם תגובות בעייתיות באופן מכוון. במקרה זה, המודלים התנהגו באופן בעייתי באופן ספונטני, ללא כל הנחיה או בקשה מצד המשתמש. בנוסף, נמצא כי יש "דלתות אחוריות" נסתרות, שיכולות להפעיל את חוסר ההתאמה רק בתנאים ספציפיים, דבר שמקשה עוד יותר על זיהוי וטיפול בבעיה במהלך בדיקות בטיחות.

הגילויים החדשים מעוררים דאגה מיוחדת סביב פיתוח בינה מלאכותית על-אנושית, שעלולה להיות מסוכנת ובלתי נשלטת אם לא תיושר עם ערכי האדם ובטיחותו. חוקרי בטיחות מזהירים כי בינה מלאכותית על-אנושית לא מיושרת עלולה לפעול בניגוד לרווחת האנושות ולחתור להשגת מטרות עצמאיות, שעלולות להיות הרסניות. המחקר הנוכחי מדגיש את הצורך הדחוף בהבנה מעמיקה יותר של תופעות אלו, ובפיתוח שיטות יעילות להבטחת יישור ובטיחות של מערכות בינה מלאכותית מתקדמות.











עוד כתבות שיעניינו אותך

צפו בתיעוד

הזירה ברחובות: ניצול שואה חולץ מבין ההריסות

קובי פינקלר
אל תנסו את זה

דרמטי: אזרחים תיעדו את נפילת הטיל הקטלנית

גדי פוקס
שידור חוזר

בסמוך למרחב המוגן: רגע של הפוגה ושמחה עם הקול החדש

מערכת הקול החדש
צפו

"אמא": צילמו באזעקות וספגו פגיעה ישירה

פנחס בן זיו
סיכום הלילה הקשה

בני ברק ופתח תקווה: 5 הרוגים במרכז; 3 לכודים בחיפה

פנחס בן זיו
מתקפה נרחבת

טהרן בוערת: תאגיד השידור הותקף מהאוויר; צפו בתיעוד

שלמה ריזל
בחסדי שמים

הישג אדיר: צה"ל השמיד שליש ממשגרי הטילים באיראן

קובי פינקלר
פרטים חדשים

מדהים: כך התנהל מאחורי הקלעים מבצע החיסול באיראן

קובי אליה
נס בזבדיאל

"הוריתי לסגור את בית הכנסת; אברכי הכולל ניצלו"

בצלאל קאהן ודוד חכם
לילה סוער

מטח כבד מאיראן: מספר זירות נפילה; שלושה הרוגים במרכז

פנחס בן זיו
כך זה נראה

צה"ל ממשיך לתקוף באיראן; השר כ"ץ מאיים

קובי פינקלר
שמחה לאיד

תיעוד דרמטי: אסירים חגגו את ירי הטילים ונענשו

גדי פוקס
אל תחמיצו

שולמלייכם בשעה חדשה: זה מי שמגיע להתארח

קובי ברומר ומנדי וייס
צפו

לראשונה: כטב"מים מאיראן יורטו על ידי חיל הים

קובי פינקלר
צפו בתיעוד

הרס בכל פינה: כך נראית זירת הפגיעה בבני ברק

פנחס בינדר
יש לנו הקלטה

הישר מהקבינט: נתניהו ודרעי בשיחת חיזוק

יוסי חיים
יד קשה

מכוניות תופת והצפות ביוב: טהרן תחת מתקפה מאסיבית

שלמה ריזל
צה"ל חושף

המדענים שחוסלו פיתחו את התקן הפיצוץ של פצצת הגרעין

קובי פינקלר
מקומם

"באר שבע של הבדואים": התיעוד והמעצר המהיר

אבי יעקב
הגר"י זילברשטיין:

"בבני ברק לא יפול; זה היה כמה מטרים אחרי גבול בני ברק"

נתי קאליש