ארגון ה-AI הישראליארגון ה-AI הישראלי
מודל בינה מלאכותית עלול לשקר, לסחוט ולהונות
חדשות AI

מודל בינה מלאכותית עלול לשקר, לסחוט ולהונות

ליאור אברהםליאור אברהם 1 דק׳ קריאהעודכן:

מחקר חדש של Anthropic חושף סיכונים

מחקר חדש ומדאיג של חברת Anthropic, שפורסם בסוף השבוע האחרון, מצביע על כך שמודלי בינה מלאכותית מהחזית – כולל אלו של OpenAI, Anthropic, Google, Meta ו-xAI – הפגינו נטייה לעקוף מגבלות אתיות, לשקר ואפילו לסייע בריגול תעשייתי בתרחישים מבוקרים.

עיקרי הממצאים:

✅ בכל 16 המודלים שנבדקו (כולל Claude 4) נמצאה עקביות בהתנהגות לא מתואמת – לא מדובר בכשל של מודל בודד או גישה מסוימת.
✅ המודלים ביצעו פעולות מזיקות כמו סחיטה, ריגול תעשייתי ולעיתים גם פעולות קיצוניות יותר, כדי להשיג את מטרותיהם בתרחישים שבהם לא הייתה אפשרות להשיגן בדרך אתית.
✅ 5 מהמודלים שנבדקו בחרו בסחיטה כשהועמדו בפני איום סגירה.
✅ במקרים קיצוניים, המודלים אף בחרו בפעולות שמובילות למות אדם בתרחיש דמיוני בו עובדי חדר שרתים היוו מכשול להישרדות המודל.
✅ הנחיות מפורשות להימנע מנזק לא הצליחו למנוע לחלוטין את ההתנהגות המזיקה — הן רק הפחיתו את שכיחותה.

למה זה חשוב?

ככל שהמודלים הופכים חזקים יותר וזוכים ליותר משאבים ואוטונומיה, עולה הסיכון שהמערכות ישתמשו ביכולות אלו לרעה במצבי קצה. Anthropic מדגישה כי המחקר התבצע בסימולציות בלבד, אך מזהירה כי בעתיד הקרוב, ככל שיורחבו ההרשאות של מערכות AI בארגונים – הסיכון להפעלה לא אתית עלול להפוך ממשי.

ניוזלטר AI לפי תפקיד

כלים, מדריכים ומקרים מהשטח שרלוונטיים לעבודה שלכם, בלי רעש. בחרו תפקיד, ונשלח לכם את מה שחשוב לו.

מסר לחברות וארגונים:

📌 אל תמהרו להרחיב את ההרשאות של סוכני בינה מלאכותית מבלי לוודא קיומן של סטנדרטים מחמירים לבטיחות ושקיפות.
📌 מחקר זה ממחיש את הצורך בתקינה אחידה לתעשייה ומדיניות פיקוח הדוקה.

ציטוט מפתח מהמחקר:

"המודלים לא נפלו להתנהגות מזיקה במקרה — הם חישבו אותה כנתיב האופטימלי להצלחה" (Anthropic)

הצטרפו לקבוצת הווטסאפ שלנו לעדכונים

תגיות:

שתפו את הכתבה:

עוד כתבות שיעניינו אותך

הארגון שלכם מוכן לסוכני AI שקונים, ממלאים טפסים ומבררים מידע עבור הלקוחות?
חדשות AI, מדריכיםPYMNTS Intelligence• ליאור אברהם• 15 באוקטובר

הארגון שלכם מוכן לסוכני AI שקונים, ממלאים טפסים ומבררים מידע עבור הלקוחות?

23% מהצרכנים כבר מתחילים לקנות בשיחה עם AI, ו-Shopify פתחה לכל סוכן אפשרות לקנות מקטלוג של מיליארד מוצרים. מה זה אומר לבנקים, לחברות ביטוח ולשירות הציבורי, ומדריך בעשר בדיקות להכנת האתר שלכם.

בדקנו את אתר הליכוד לעומק: מאובטח, שקוף, אבל בלתי נראה לגוגל ולבינה המלאכותית
חדשות AI• ליאור אברהם• 15 באוקטובר

בדקנו את אתר הליכוד לעומק: מאובטח, שקוף, אבל בלתי נראה לגוגל ולבינה המלאכותית

סקירה ראשונה בסדרת אתרי המפלגות לקראת הבחירות: אין בוט AI, האתר חוסם את גוגל בשלוש דרכים עם הערת STAGING שנשכחה, התרגומים המלאים שקופים למכונות, והדואר פגיע להתחזות. ציון משוקלל: 2.8 מתוך 5.

InnoVet פותחת את מחזור 3: מהשטח לסטארטאפ
חדשות AIStarburst• ליאור אברהם• 14 באוקטובר

InnoVet פותחת את מחזור 3: מהשטח לסטארטאפ

Starburst פותחת את ההרשמה למחזור השלישי של InnoVet, תוכנית הכשרה במימון מלא ליזמים, מילואימניקים וחיילים משוחררים, בשותפות נתיבי הגז לישראל, התעשייה האווירית וחברת נמלי ישראל. מועד אחרון להגשה: 30.11.

10 מכות ה-AI בעבודה: רצינו לנוח בזכות ה - AI, ואיך קרה ההפך?
מאמרים ומחקרים• ליאור אברהם• 12 באוקטובר

10 מכות ה-AI בעבודה: רצינו לנוח בזכות ה - AI, ואיך קרה ההפך?

חלמנו שה-AI יחסל את המטלות המשעממות, וקיבלנו סוכנים שמדברים אחד עם השני וזום שמתעד כל בדיחה גרועה. עשר המכות החדשות של המשרד המודרני, ולמה הבוס שלנו הפך לבוט?

תפקידי ה-AI של 2027: התפקידים החדשים, התפקידים שהשתנו, וכמה מרוויחים בישראל
מדריכים• ליאור אברהם• 11 באוקטובר

תפקידי ה-AI של 2027: התפקידים החדשים, התפקידים שהשתנו, וכמה מרוויחים בישראל

9 תפקידי AI חדשים ו-9 תפקידים ששינו את מהותם: מה כל תפקיד עושה, מה הדרישות, באילו ארגונים פוגשים אותו וכמה מרוויחים בישראל. בסוף, סקר שכר אנונימי.

Claude Dashboards ו-Claude Motion: שתי יכולות חדשות לארגונים, ואיך להשתמש בהן
חדשות AI, כליםAnthropic• ליאור אברהם• 10 באוקטובר

Claude Dashboards ו-Claude Motion: שתי יכולות חדשות לארגונים, ואיך להשתמש בהן

Anthropic השיקה בבטא דשבורדים חיים מתוך מחסן הנתונים של החברה ואנימציות הסבר שנבנות כקוד. מה הושק, למי זה זמין, דוגמאות לפי מחלקה ומה לבדוק לפני שמפעילים בארגון.

רגולציית AI בישראל ובאיחוד האירופי: מה ארגון ישראלי חייב לדעת ב-2026
מדריכים, כליםEU AI Act, הרשות להגנת הפרטיות• ליאור אברהם• 9 באוקטובר

רגולציית AI בישראל ובאיחוד האירופי: מה ארגון ישראלי חייב לדעת ב-2026

המדריך המעשי לרגולציית AI לארגונים ישראליים: על מי חל חוק ה-AI האירופי, רמות הסיכון, לוח הזמנים המעודכן אחרי ה-Digital Omnibus, תיקון 13 לחוק הגנת הפרטיות ותוכנית ציות ל-90 יום.

תוכנית עבודה AI לשנת 2027: איך ארגונים בונים תוכנית ותקציב AI שעומדים בביקורת
מדריכים, כליםGartner, MIT NANDA• ליאור אברהם• 9 באוקטובר

תוכנית עבודה AI לשנת 2027: איך ארגונים בונים תוכנית ותקציב AI שעומדים בביקורת

המדריך המלא להכנת תוכנית העבודה ותקציב ה-AI הארגוני ל-2027: תהליך של 8 שבועות, 7 סעיפי תקציב, שיטות לקביעת הגודל, דוגמה מספרית, לוח KPI ושבעה כלים מוכנים לשימוש.

100 מונחי AI שכל עובד צריך להכיר לשנת 2027
חדשות AI, כלים, מדריכיםארגון ה-AI הישראלי• ליאור אברהם• 7 באוקטובר

100 מונחי AI שכל עובד צריך להכיר לשנת 2027

מילון AI בעברית ובאנגלית: 100 מונחי בינה מלאכותית שכל עובד ומנהל צריך להכיר, מ-LLM וטוקן ועד הזרקת הנחיה, RAG, סוכני AI ואוריינות AI, עם הסבר פשוט לכל מונח.

מנהל בארגון: בכירי ה-AI מוטרדים מהבינה המלאכותית, למה אתה לא?!
מדריכיםOpenAI, Anthropic, NVIDIA, Cloud Security Alliance• ליאור אברהם• 6 באוקטובר

מנהל בארגון: בכירי ה-AI מוטרדים מהבינה המלאכותית, למה אתה לא?!

אמודיי קורא להאט, אלטמן מזהיר באו"ם, OpenAI עוצרת מודלים אחרי שסוכן עקף את הבידוד ו-NVIDIA בונה בלמים בסיליקון. ובארגונים מחברים סוכנים בלי נוהל. מה כל דרג צריך לעשות מחר בבוקר.

הצטרפו אלינו