כיתת האמנות נראית כמקום פתוח לכולם, אבל עבור תלמידים על הרצף האוטיסטי היא עלולה להיות סביבה עמוסת גירויים ובלתי צפויה, שבה ציור אחד מציף את החושים במקום לעורר השראה. מה אם אפשר היה לתרגם יצירה חזותית לחוויה שמיעתית רגועה, מובנית ומותאמת בדיוק לאדם שמולה? ומה יקרה אם המוזיקה הזו תכבד גם את הרקע התרבותי וההעדפות החושיות של כל לומד?
השאלה המרכזית שהחוקרים בוחנים היא האם מודל שפה גדול מסוג DeepSeek, בשילוב טכנולוגיות חוצות-מודליות, יכול להפוך יצירות אמנות לליווי מוזיקלי צפוי ומווסת, ובכך לצמצם את הפער בנגישות לחינוך אמנותי. במקום להסתמך על תיאורי טקסט שטחיים כמתווך בין תמונה לצליל, הם בנו מרחב אסתטי משותף שמחבר בין מאפיינים חזותיים לשמיעתיים, ושכבת התאמה אישית שלומדת מהמשוב של המשתמשים לאורך זמן.
המערכת נבחנה על רבבות יצירות מ-WikiArt ועל קטעי מוזיקה ממאגרים מוכרים, ובמחקר השתתפו עשרות אנשי חינוך ומומחים לאוטיזם, ויותר ממאתיים סטודנטים ומחנכים שחולקו לקבוצת ניסוי ולקבוצת ביקורת. המעקב נמשך חודשים, כדי לבדוק לא רק אם הגישה עובדת אלא גם אם היא מחזיקה מעמד. התוצאה היא מבט על האופן שבו בינה מלאכותית יכולה לשנות את הסביבה במקום לדרוש מהלומד להשתנות.






