למרות ש-ChatGPT נחשב לאחת מהבינות המלאכותיות המתקדמות בעולם, משחק השחמט שלו מלא בטעויות מוזרות ולעיתים אף משעשעות. הבינה המלאכותית שמאחורי המודל מבצעת לא פעם מהלכים בלתי חוקיים, שוכחת את מיקום הכלים על הלוח, ואף "מדמיינת" מהלכים שאינם אפשריים כלל. למשל, תועד מקרה בו ChatGPT ביצע הצרחה לא חוקית ולכד את הרץ של עצמו, ובמקרה אחר הכריז על מט לאחר שלקח כלי שכלל לא היה רלוונטי ולא יצר מצב שכזה.
הטעויות הללו נובעות מכך ש-ChatGPT אינו "מבין" באמת את מבנה לוח השחמט או את מיקום הכלים. בניגוד למנועי שחמט ייעודיים כדוגמת משחקי המחשב המצויים כיום, הבינה המלאכותית לא מחזיקה ייצוג פנימי מדויק של מצב הלוח. מומחים מעריכים כי רמת המשחק של ChatGPT נמוכה מ-1500 במדד ELO (שיטת הדירוג בשחמט), ויש אף שמעריכים אותה סביב 249 בלבד. לעיתים, הבינה המלאכותית מצליחה לפתוח את המשחק בצורה סבירה, אך ככל שמתקדמים במהלכים – רמת המשחק שלה יורדת במהירות. אחת האסטרטגיות שנתגלתה כיעילה נגד ChatGPT היא להעסיק אותה באיומים מקומיים, שכן היא נוטה להגיב למהלך האחרון בלבד ולא לשמור על אסטרטגיה עקבית לאורך המשחק.
0 תגובות