חיוך, פרוני, עווית וחיוך - הבעת הפנים שלך היא הגבול הבא בביג דאטה

הפנים האנושיות מופעלות, תלוי איך אתה סופר אותם, על ידי 23-43 שרירים, שרבים מהם מתחברים לעור, ואינם משרתים שום תפקיד ברור לשרוד. חייזר הבודק דגימה אנושית בבידוד לא ידע מה להכין אותם. כשהוא מושך על המצח, הגבות, השפתיים והלחיים, משדרים השרירים שפע של מידע על מצבנו הרגשי, רמת העניין והערנות. זהו אמצעי תקשורת יעיל להפליא - כמעט מיידי, בדרך כלל מדויק, שמתעלה על רוב חסמי השפה והתרבות. אבל לפעמים הנתונים הולכים לאיבוד, מתעלמים מהם או מתפרשים באופן שגוי. אם לוגר מחייך ביער בלי שאיש יכול לראות אותו, האם הוא באמת שמח?

מהסיפור הזה

[×] סגור

כה רגשונים ארוכים. המדען מפתח טכנולוגיה שיכולה לאתר ולקרוא את הביטויים שלנו

וידיאו: פרסי סמיתסוניאן המצאה 2015: רנה אל קליובי

קריאות קשורות

אינטליגנציה רגשית: מדוע זה יכול להיות חשוב יותר מנת המשכל

קנה

רנא אל קליובי שונאת לראות שהמידע מבזבז. במפגש עם אל קליובי במשרדה הקטן בוולטם, מסצ'וסטס, אני רואה אותה מכווצת את שריר הזיגומטוס העיקרי שלה, מרימה את פינות פיה ואת אורביקוליס אוקולי שלה, ומכווצת את פינות עיניה החיצוניות. היא מחייכת ואני מסיק שהיא מברכת אותי לפני שהיא אפילו מוציאה את המילה "שלום". אולם חילופי דברים חברתיים רבים מתקיימים היום ללא אינטראקציה פנים אל פנים בזמן אמת. לשם נכנסים אל קליובי, והחברה שלה.

אל קליובי, בן 37, מחייך לעתים קרובות. יש לה פנים עגולות, נעימות, אקספרסיביות ובאופן חפץ, ומכבדות את מעמדה כמייסד שותף של סטארט-אפ טכנולוגי שצומח במהירות - אנטי בזוס, א-צוקרברג. החברה שלה, Affectiva, אותה הקימה בשנת 2009 עם עמיתה דאז במעבדת המדיה של MIT, רוזלינד פיקארד, תופסת עמדה בחוד החנית של הטכנולוגיה בכדי להשתמש במחשבים לגילוי והפרשנות של הבעות פנים אנושיות. תחום זה, המכונה "מחשוב רגיש", מבקש לסגור את פער התקשורת בין בני אדם למכונות על ידי הוספת דרך אינטראקציה חדשה, כולל שפה לא מילולית של חיוכים, התכתחות וגבות מורמות. "הנחת היסוד של מה שאנחנו עושים היא שרגשות חשובים, " אומר אל קליובי. "רגשות לא משבשים את החשיבה הרציונאלית שלנו אלא מנחים ומיידעים אותה. אבל הם חסרים מהניסיון הדיגיטלי שלנו. הסמארטפון שלך יודע מי אתה ואיפה אתה, אבל הוא לא יודע איך אתה מרגיש. אנו שואפים לתקן את זה. "

מדוע הסמארטפון צריך לדעת איך אתה מרגיש? לאל קליובי יש שלל תשובות, שכולן מתבססות על שילוב בלתי נראה של גבולות המחשבים בשגרה בחיי היומיום שלנו. היא חוזה "טכנולוגיה לשליטה בתאורה, טמפרטורה ומוזיקה בבתים שלנו בתגובה למצב הרוח שלנו", או אפליקציות שיכולות להתאים את תוכן הסרט על סמך התגובות המודעות שלך אליו בזמן שאתה צופה. היא מדמיינת תוכניות שיכולות לפקח על הביטוי שלך כשאתה נוהג ומזהיר מפני חוסר תשומת לב, נמנום או כעס. היא מחייכת לאזכור הרעיון החביב עליה - "מקרר שיכול לחוש כשאתה לחוץ ונועל את הגלידה."

בפרט, היא חושבת ש- Affectiva, והטכנולוגיה שהיא מסייעת להיכנס למיינסטרים, יהוו לטובת הבריאות. חוקר הבודק תרופה חדשה, או מטפל המטפל בחולה, מקבל משוב רק במרווחים, בכפוף לכל בעיות הדיווח העצמי - הרצון הלא מודע לרצות לרופא, למשל, או זיכרון סלקטיבי המעדיף את הזיכרונות האחרונים. . אל קליובי מצפה תוכנה הפועלת ברקע של המחשב הנייד או הטלפון של הנבדק, שעלולה להרכיב תיעוד של רגע אחר רגע של מצב הרוח שלו במהלך אותה תקופה (יום, חודש) ולתאם את זה ל זמן או כל דבר אחר שהמכשיר יכול למדוד או לעקוב אחריו. "זה אפילו לא יצטרך להיות חלק מתוכנית טיפול, " היא חושבת. "אתה יכול פשוט לקבל את זה בטלפון שלך וזה אומר לך, בכל פעם ש- X מתקשר יש לך ביטוי שלילי וזה אומר לך משהו שאולי לא ידעת."

הירשמו עכשיו למגזין סמיתסוניאן תמורת 12 דולר בלבד

הסיפור הזה הוא מבחר מגיליון דצמבר של המגזין סמיתסוניאן.

קנה

El Kaliouby מקדם מחשוב רגיש כשלב הבא ההגיוני בהתקדמות ממקלדת לעכבר למסך מגע ועד זיהוי קולי. באביב, Affectiva פרסמה את ערכת פיתוח התוכנה המסחרית הראשונה שלה, שמפתחים, המעוניינים במצבים רגשיים בזמן אמת של המשתמשים, יכולים לשלב בתוכניות שלהם - נגני מוזיקה או אפליקציות משחק או היכרויות, למשל. ובדיוק בסתיו השיקה חברת Affectiva את Emotion As a Service, תוכנית מבוססת ענן שאליה לקוחות יכולים להעלות סרטונים לניתוח. מי עשוי להשתמש בזה? מועמד שעומד להתראיין לעבודה, שחושש להראות חרד או משועמם או אפילו לחייך יותר מדי. או חברת תעופה שמעסיקה דיילות, עם מאות אפליקציות וידיאו שתוכלו לנפות בהן בחיפוש אחר אלה שיכולים לנהל חיוך משכנע בזמן שהם נפרדים לנוסעים. (חיוך אמיתי, שכולל התכווצות שרירים בזוויות העיניים, נקרא חיוך "דושן", הקרוי לאנטומיסט בן המאה ה -19; ההפך שלו, חיוך מאולץ המשתמש רק בפה, הוא למעשה לפעמים קרא חיוך של "פן אם".)

וכמובן שהמכשירים שמפעילים תוכנה זו מחוברים לאינטרנט, כך שהמידע שהם אוספים מצטבר, מנופה ומרושת באופן מיידי באופן בו אפליקציות המדיה החברתית מזהות נושאים או אישים פופולריים. הידור, אולי, למשהו כמו מדד מצב הרוח של Affectiva, קריאה מספרית על האושר הלאומי הגס, או מחולק לאזורים בהם חיוכים או מציצים כרגע במגמה.

התוכנית הבסיסית של Affectiva מנתחת את הפנים 20 פעמים בשנייה עבור 46 ביטויים מקומיים של אושר, עצב, הפתעה, פחד, כעס, גועל ובוז, בתוספת עניין ובלבול. (נעמי שבין / סמיתסוניאן)

עד כה לקוחותיה העיקריים של חברת Affectiva היו חברות פרסום, שיווק ומדיה. התוכנה שלה אוטומטית את תהליך הפעלת קבוצת המיקוד, הטקס המסורבל של הרכבת תריסר אנשים בחדר כדי לתת חוות דעת על מוצר חדש, סדרות טלוויזיה או קמפיין מודעות; זה רושם תגובות ישירות, מבלי שהמשתתף יצטרך לסובב את החוגה או לענות על שאלון בתגובה למצגת. יתרה מזאת, התוכנה מרחיבה את קבוצת המיקוד הפוטנציאלית לכל העולם, או לפחות את החלק הגדול ביותר שיש לה מחשב או מכשיר נייד המותאם למצלמת רשת.

משוב מהעין הבלתי נלאית והראיית העין של Affectiva עזר לעצב סיטקום טלוויזיה טלוויזיוני, תוך העברת שתי דמויות לשכחה בגלל החטא של אי הצורך לצחוק את הצופים. (אל קליובי לא תזהה את ההצגה או את הדמויות.) התוכנה שלה שימשה לבניית "דגימת חיוך", מכונה שהפיצה חטיפי ממתקים לקונים שחייכו למצלמה שלה. עם מחקר רב יותר, זה יכול להועיל ככל הנראה למעקב אחר קהל בשדות תעופה, או כדי לזהות מעסקי חנויות פוטנציאליים, או כגלאי שקר.

אבל אל קליוביובי התנגד ליישומים מופרעים אלה, ככל שיהיו רווחיים. היא חושבת כי מחשוב רגשני ישנה את העולם, כולל, אך בשום פנים ואופן, מכירת חטיפי ממתקים. "האתוס של החברה שלנו, " היא אומרת, "הוא להשתמש בטכנולוגיה זו כדי לשפר את חייהם של אנשים ולעזור להם לתקשר טוב יותר, ולא רק כדי לעזור למפרסמים למכור מוצרים נוספים."

**********

שלא כמו יזמים טכניים רבים, להתעשר לא היה בסדר היום המקורי של אל קליובי. נולדה בקהיר להורים מצריים ששניהם עובדים בטכנולוגיה, למדה מדעי המחשב באוניברסיטה האמריקאית בקהיר, שם סיימה את לימודיה בשנת 1998, בערך באותה תקופה מחשבים הפכו לחזקים מספיק כדי שהחוקרים יחשבו לספק להם מה במונחים אנושיים קרא אינטליגנציה רגשית.

היא המשיכה ללמוד מדעי המחשב באוניברסיטת קיימברידג 'והגיעה ממש לאחר הפיגועים באמריקה ב- 11 בספטמבר 2001. הוריה חשבו שהיא מסתכנת במעצר, הטרדה או גרוע יותר בגלל מורשתה. אך למרות שלבשה כיסוי ראש מוסלמי עד לפני מספר שנים, לא בקיימברידג ', אנגליה, ולא בקיימברידג', מסצ'וסטס, לשם עברה בשנת 2006, להצטרף למעבדת המדיה של MIT, האם היא טרחה אי פעם לדתה או להופעתה . "אני חושבת שזה בגלל שאני מחייכת הרבה, " היא אומרת ומחייכת.

האנטומיסט הצרפתי דושן פרסם מחקרים בולטים על הבעות פנים אנושיות. (תמונות ברידגמן)

בזמן שקיימה בקיימברידג 'היא התעניינה בבעיית האוטיזם, ובמיוחד בקושי שיש לאוטיסט בקריאת הבעות פנים. היא הציעה לבנות "מכשיר שמיעה רגשי" שניתן ללבוש כדי לקרוא פרצופים ולהצביע על התנהגויות מתאימות כלפי הלובש. בהתחלה נדחתה למענק מטעם הקרן הלאומית למדע בטענה שהפרויקט קשה מדי, היא ועמיתיה בנו אב-טיפוס, המורכב מזוג משקפיים מצוידים במצלמה זעירה, אורות מהבהבים ואוזניות, לא דומה גרסה מוקדמת של Google Glass. בקשת מענק שנייה הצליחה, ולאחר שהיא עברה ל- MIT, היא וצוותה עבדו בשלוש השנים הבאות כדי לשכלל ולבדוק אותה בבית ספר ברוד איילנד. אל קאליובי מתארת ​​את זה כ"פרויקט מחקרי ומצליח "- הילדים האוטיסטים שהשתמשו בו חוויות חיוביות להפליא - אך בשנת 2008, עם סיום המענק, עמדה בפני רגע של חשבון. ההתעניינות המסחרית במחשוב רגיש גברה, והיא רצתה לראות אותה מתרחבת ופורחת; העמדת מאמציה בפיתוח המשקפיים תגביל אותה לפרוסה זעירה מהשימושים הפוטנציאליים שלה. אז יחד עם פיקארד, היא ניתקה את Affectiva, תוך שהיא מחזיקה בתקווה שחברה אחרת תאסוף את מכשיר השמיעה הרגשי ותביא אותו לשוק.

כאשר הוקמה Affectiva, קומץ "חברי הצוות" שהקימו את החברה בחרו כל אחד בערך שהם רצו לגלם, כמו "למידה" או "אחריות חברתית" או "כיף." הרס, כאסטרטג הראשי ואיש המדע, הייתה "תשוקה". החברה המונה 20 איש מנוהלת כדמוקרטיה מעין, עם ישיבות חצי שנתיות בהן עובדים מצביעים על סדרי עדיפויות להמשיך במהלך ששת החודשים הקרובים. במשרדה יש ​​לוח לבן מכוסה ברישומים של בתה הצעירה של אחד מעמיתיה; יש לה בן 6, אדם, ובת, ג'נה, בת 12, שגרה איתה בפרברי בוסטון (אביהם גר במצרים). דרכה קלה ומתחשבת; שעה לפגישה בבוקר היא מציעה להזמין כריך לאורח, למרות שהיא עצמה מדלגת על ארוחת צהריים. "זה הרמדאן בשבילי, " היא אומרת ומחייכת, "אבל זה לא הרמדאן בשבילך."

היא מושיבה מבקרים בשולחן העבודה, מול צג ומצלמת רשת. התוכנה מאתרת את פני המבקר ומציירת קופסה על המסך. הוא מזהה קבוצת נקודות למעקב: פינות העיניים והפה, קצה האף וכן הלאה. עשרים פעמים בכל שנייה התוכנה מחפשת "יחידות פעולה", משחק השרירים לעיתים קרובות. ישנם 46 כאלה, על פי מערכת הסיווג הרגילה, מערכת קידוד הפנים (FACS). הם כוללים מרימי מצח פנימיים וחיצוניים, גומות, מצמוצים, קריצות ונקבי שפתיים, משפכים, מכבשי לחץ ומוצצים. התוכנית הסטנדרטית של Affectiva דוגמת כ -15 כאלה בכל עת ומנתחת אותם לביטויים של שבעה רגשות בסיסיים: אושר, עצב, הפתעה, פחד, כעס, גועל נפש ובוז, בתוספת עניין ובלבול. חייך, ותוכל לראות את מידת האושר מופיעה; סלסלו את שפתכם בזלזול והתוכנית מציינת את הגועל שלכם.

או ליתר דיוק, הבעת הגועל שלך. כל הנחת היסוד של מחשוב רגיש נשענת על מה שמסתמן בקפיצת אמונה, שחיוך מעביר תחושה של אושר, או הנאה, או שעשוע. כמובן, בני אדם נמצאים באותה תנוחה: אנו יכולים להתעתע בחיוך מזויף או בכעס מזויף, כך שלא נוכל באמת לצפות ליותר מתוכנת מחשב, לפחות עדיין לא.

עם הזמן חברת Affectiva בנתה ארכיון של יותר משלושה מיליון סרטוני פנים, שהועלו על ידי משתמשי אינטרנט שגויסו מכ -75 מדינות בכל רחבי העולם. מאות אלפים כאלה נותחו על ידי משקיפים מיומנים וקודדו עבור יחידות פעולה של ה- FACS - התחייבות מונומנטלית, מכיוון שהסרטונים ממוצעים בסביבות 45 שניות וכל אחד לוקח זמן לעיבוד של פי חמישה. התוצאות של הקודנים האנושיים, בתורם, שימשו כדי "לאמן" את האלגוריתמים של החברה, שעיבדו את השאר בזמן אמת. מאגר המידע כולו מכיל כעת כארבעים מיליארד "נקודות נתוני רגש", משאב, מתפאר באל קליובי, שמבדיל את Affectiva מחברות אחרות באותו תחום, דוגמת Emotient, קליפורניה, ככל הנראה המתחרה הקרוב ביותר שלה.

(תרשים: אינפוגרפיקה של 5W; מקור: Daniel McDuff, מעבדת המדיה של MIT, Affectiva)

דניאל מקאדוף, שהצטרף ל- Affectiva ממעבדת המדיה של MIT ומשמש כמנהל מחקרי, לומד ללא הרף את האולם הזה לקבלת תובנות נוספות לביטוי הרגשות. במה הם שונים זה מזה לפי גיל, מין ותרבות? (אולי באופן מפתיע, מקדוף גילה שאנשים מבוגרים הם יותר אקספרסיביים, בעיקר של רגשות חיוביים, מאשר צעירים יותר.) האם אנו יכולים למדוד באופן אמין בוז, מבוכה, שעמום, חרדה? מתי קצה מצח מאותת על בלבול, ומתי הוא מצביע על ריכוז? איך נוכל להבדיל בין ביטוי של פחד לבין זה שמסמן הפתעה? (רמז: יחידת פעולה 1, "מגדלת הגבה הפנימית", היא הסמן לפחד; יחידת פעולה 2, "מגדלת הגבה החיצונית", מעידה על הפתעה.) יש, לדבריו, כל סיבה להאמין שהתוכנית תמשיך. להשתפר באיתור ביטויים (אם כי לעולם לא יתגבר לחלוטין על המכשול הגדול מכולם: בוטוקס).

לבקשתי, מקאדוף העביר לתוכנית את אחת הבעיות הקלאסיות הגדולות של גילוי הרגש, המונה ליזה, שחיוכיה הרוחניים האניגמטיים סקרן את הצופים כבר 500 שנה. עם האזהרה שהתוכנה עובדת הכי טוב על החלפת ביטויים, ולא על תמונות סטטיות, הוא דיווח כי היא לא מצאה שום הוכחה לחיוך אמיתי של לה גיוקונדה, אלא שילוב כלשהו של יחידת פעולה 28 (גליל שפתיים) ו -24 (שפתיים לחוצות זו בזו), אולי מציע רמה מסוימת של אי נוחות.

**********

"אני מדבר איתך עכשיו, " אומר אל קליובי, "ומתבונן בך כדי להעריך את העניין שלך בדברי. האם עלי להאט ולהסביר יותר? האם עלי לעבור לנושא אחר? עכשיו דמיין שאני נותן סמינר מקוון לקבוצה גדולה שאני לא יכול לראות או לשמוע. אין לי פידבק, אין דרך לדעת אם בדיחה עבדה או נפלה, אם אנשים מאורסים או משועממים. האם זה לא יהיה נהדר לקבל את המשוב הזה בזמן אמת, מצטבר, מרגע לרגע כשאני הולך? "

היא מגלמת מודעה עבור ג'יבו, "רובוט חברתי" הזמין להזמנה מוקדמת באתר מימון ההמונים אינדיגוגו, ופותח על ידי עמית MIT לשעבר, סינתיה Breazeal. במראה דומה למנורת לבה היי-טק, ג'יבו יושב על השולחן וסורק את סביבתו, מזהה אנשים לפי פנים ומתקשר איתם - מעביר הודעות, מביא תזכורות, מבצע שיחות טלפון שגרתיות, ואפילו משוחח. זהו יישום פוטנציאלי נוסף לתוכנה של Affectiva - החברות מנהלות שיחות - וזה "פוטנציאל מרגש מאוד", אומר אל קליובי.

כמה מרגש, אבל הסיכוי של רובוטים מעובדים רגש מדאיג אחרים. שרי טורקלה, שבדקה זה מכבר את הקשר בין בני אדם למחשבים, מזהירה בספרה החדש " השבת שיחה: כוחה של שיחה בעידן דיגיטלי", על "הרגע הרובוטי", כאשר מכונות מתחילות להחליף חברותיות אנושית. טורקלה מאמינה שמדענים כמו אל קליובי וצוותה יכולים לעשות את מה שהם אומרים שהם יעשו. "כל אלה אנשים מחוננים ומחוננים שעושים עבודה מבריקה", היא אומרת. והיא מסכימה כי בהקשרים מסוימים - סביבות מסוכנות, כמו חלל חיצוני או סביב מכונות כבדות, בהן אתה רוצה לגייס כל אמצעי תקשורת אפשרי - יש למחשוב האפקטיבי תפקיד. "אבל השלב הבא", היא אומרת, "לא עוקב כלל. השלב הבא הוא, בואו נעשה חבר לרובוט. ראיינתי הורים שמחים שהילדים שלהם מדברים עם סירי, ואני חושב שזה לא מוריד אותנו בדרך לאן אנחנו רוצים ללכת. אנו מגדירים את עצמנו כבני אדם על ידי מי שאנו מקשרים איתו, וזה לא הגיוני בעיניי ליצור את תחושת ההערכה העצמית שלך ביחס למכונה. מדוע תרצה שמחשב יידע אם אתה עצוב? "

אפילו אל Kaliouby נוטה להסכים ש"אנחנו מבלים יותר זמן ממה שאנחנו צריכים עם המכשירים שלנו ", תוך התחשבות, באופן טבעי, בבתה הטרונית, שמבטה ננעל על מסך הטלפון החכם שלה.

אבל היא רואה את המגמה לקישוריות גדולה יותר ויותר כבלתי הפיכה, והיא חושבת שלמרות שמשתמשים צריכים תמיד להצטרך להצטרף, אנו עשויים להפיק את המיטב ממנה. היא חוזה שלמכשירים שלנו יהיה "שבב רגש וחבילת אפליקציות שמשתמשות בו באופן שמוסיף מספיק ערך לחיינו, העולה על דאגותיהם של אנשים בשיתוף נתונים אלה." היא מציירת אנלוגיה למכשירי GPS: מחשוב אפקטיבי יכול עזרו לנו לנווט במרחב הרגשי באותה דרך שאפליקציות טלפוניות עוזרות לנו להתמצא במרחב הפיזי. "כולם דאגו למכשירי חישה מיקום כאשר הם גם יצאו לראשונה: הם פולשים לפרטיות שלנו, הם עקבו אחרינו כל הזמן", היא אומרת. "רק עכשיו, כולנו הולכים לאיבוד ללא מפות Google בטלפונים שלנו. אני חושב שזה יהיה אותו דבר. "

**********