טכנולוגיה חדשה ניתן להחליף הבעות פנים בזמן אמת

זכור כי Bizarro העולם "Myidol" App כי הלך ויראלי באביב הזה בגלל היכולת שלה להשתמש בתוכנת זיהוי פנים כדי להפוך את הדמות דיגיטלית שנראית ונעה בדיוק בעיקר כמוך? זה עומד להפוך למציאות … מין.

חוקרים בסטנפורד הבחינו כיצד להעביר הבעות פנים של אדם אחד אל אדם אחר בזמן אמת באמצעות וידאו.

המודל המוצג בסרטון ההדגמה של סטנפורד משתמש רק במחשב הצרכן כיתה ו מצלמה עומק עבור כל שחקן - כלומר אתה לא בהכרח צריך ציוד מהודר לבצע את זה tromp l'oeil, אתה רק צריך כמה אלגוריתמים מורכבים.

החוקרים פיתחו אלגוריתם חדש בזמן אמת, אשר לוקח חזותיים באיכות גבוהה של כל פנים של משתתף ומשתמש בהם כדי לשנות את הביטויים של "שחקן המקור" (האדם המספק את הבעות פנים ו / או דיבור) ל "שחקן היעד" (האדם שפניו יטופלו על פי מה שעושה השחקן). מקור המידע החזותי של השחקן עובר את התוכנית ומקבל שניתנו על גבי זרם הווידאו של שחקן היעד, אז זה נראה כמו שחקן היעד הוא מחייך, מדבר, דבק את הלשון שלה החוצה, או כל דבר אחר עולה על הדעת.

הודות לסדרה של נקודות התייחסות הממופות סביב הפנים (בדומה לאפליקציית Myidol), סוגי המידע החזותי שנמדדו על ידי המערכת כוללים צורת פנים ותכונות (כמו העיניים, האף, הפה ואפילו הקמטים) וכן מרקם ועומק הפנים. לאחר מכן התוכנית תואמת את נקודות ההתייחסות של שחקן המקור לשחקן היעד ומעל אותן ביטויים אל היעד עבור עדכון וידאו ריאליסטי.

מאחר שהמערכת הזאת עדיין נמצאת בעבודות (והשתמשו בציוד בסיסי למדי), תוצאות הקצה הן עדיין קצת מוזרות - כמו השיניים המטורפות למחצה שהמערכת מכילה בתוך הפה של המטרה, כך שאין חור שחור פעור כאשר הוא " פתוח "(ראה לעיל) … כמו גם מבט ריק של העיניים. אבל אלה הם צ 'יפס קטן לעומת מה דברים מגניבים את הפיתוח של תוכנית זו אומר לנו.

הנה כמה רעיונות למה אנחנו יכולים להשתמש טק עבור:

• יש לך ראיון עבודה חשוב על סקייפ, ואתה לא לבוש להצלחה. פשוט להשתמש דוכן למראה לעמוד בזמן שאתה מספק את הבעות הפנים ואת תשובות בראיון הרוצח.

• אתה צופה בהרצאה בשידור חי מפי פרופסור בכיר בגרמניה - הבעיה היחידה היא שאתה לא מדבר גרמנית. אין דאגות, הודות למתרגם בזמן אמת באמצעות תוכנה זו, אתה יכול לראות את פרופ 'לספק את הדיבור שלה שפת האם שלך ללא כל עיכוב דיבוב מחריד של חזותיים.

צפה בהחלפת הביטויים בפעולה: