המחקר מבקש להתמודד עם אחת השאלות המרכזיות בעולם הלמידה: כיצד ניתן לזהות את הרגע שבו סטודנט ממשיך לקרוא, אך הקשב שלו נחלש או שהוא כבר אינו מבין באופן מלא את הטקסט?
לשם כך מוביל ד"ר מלכה את הפיתוח ההנדסי והטכנולוגי של מערכת מבוססת בינה מלאכותית, שתנתח בזמן אמת תנועות עיניים, כיוון מבט, מצמוצים, תנוחת ראש, הבעות פנים ודפוסי קריאה. באמצעות שילוב בין ראייה ממוחשבת ולמידת מכונה, המערכת תנסה לזהות מצבים של נדידת מחשבות, ירידה בקשב וקושי בהבנת הנקרא.
"לעיתים העיניים ממשיכות לנוע על פני הטקסט, אך הקורא כבר אינו קשוב או אינו מעבד באופן מלא את משמעות הדברים," מסביר ד"ר מלכה. "המטרה שלנו, היא לפתח מערכת AI שלא רק תדע לאן הלומד מסתכל, אלא גם תוכל להעריך בזמן אמת את המתרחש במהלך הקריאה."
מערכת כזאת עשויה להשתלב בפלטפורמות למידה מקוונות, במחשבים אישיים ובמערכות הוראה דיגיטליות. היא תוכל לזהות שהלומד מתקשה, להציע הסבר נוסף, להפנות אותו לחלק בטקסט שלא הובן, להתאים את קצב הצגת החומר או להמליץ על הפסקה קצרה.
הגישה מבקשת לעבור ממדידה בדיעבד – למשל באמצעות מבחן הנערך לאחר הקריאה – לניטור רציף של תהליך הלמידה עצמו.
"כיום אנחנו יודעים אם הסטודנט הבין, בדרך כלל, רק לאחר שהוא מסיים לקרוא ועונה על שאלות," אומר ד"ר מלכה. "החזון הוא לזהות את הקושי בזמן שהוא מתרחש, וכך לאפשר בעתיד תמיכה אישית ומדויקת יותר לכל לומד."
