https://frosthead.com

הכניסה לתחרות הווידיאו היא תצוגה המפוצצת את הראש של צליל חזותי ומעוות

הדו קוטב של ג'יימס אליבן מציג מראה אורקולי המייצר תמונת צליל מנוכחות ותנועת הנושאים שלהם. נתוני האודיו המתקבלים (כולל הנתונים של המשתתף) משמשים להפיכת הגוף לדיוקן מעוות שנע בין מצבי כאוס וסדר. הסרטון גם עושה עבודה יעילה להפליא בלכידת הקסם האינסופי של הנבדקים מההתקנה, ומספק סיפוקים מיידיים ותחושת אפשרויות אינסופיות.

איך הגעת לרעיון לסרטון הזה?

היצירה הזו החלה כניסוי. דיברתי בפסטיבל עיצוב והתבקשתי (יחד עם הדוברים האחרים) להרכיב סרטון "תודה על שבאת" קצר שיופעל בסוף האירוע. רציתי לעשות משהו קצת יותר מעניין מאשר פשוט לדבר בסמארטפון שלי. במקור תכננתי ליצור אפליקציה למעקב פנים שעיוותה ותפסה את פני בתגובה לנאומי. עם הזמן שיניתי זאת לחווית גוף שלם באמצעות מצלמת Kinect.

נתקלתי בהשפעה זו שנראתה כה דרמטית, עד שהחלטתי לחקור בהמשך ולפרסם את דו-קוטבי (כך נקרא בגלל התנודות הבלתי פוסקות בין מצבי סדר וכאוס) בצורה של סרטון קצר. אנשים התחילו להתעניין בתצוגה של היצירה אז שיניתי אותה כדי להפוך למיצב. הפרויקט הפך למאמץ שיתופי, כאשר ליאם פאטון מאולפני Silent הוסיף פן סאונד אינטראקטיבי. הוא הוצג במספר אירועים ותערוכות מאז.

אנחנו אוהבים לחנוק, אז להתפנק, על מה אנחנו מסתכלים כאן?

האפקט הבסיסי אינו מעורב מדי. אני משתמש ב- openFrameworks שהוא ערכת כלים לתכנות מבוססת C ++. בערך 30 פעמים בשנייה משולבים נתוני העומק והזנת הווידיאו ממצלמת Xbox Kinect ליצירת מודל תלת ממדי של המבקרים. אני משתמש בנתוני הסאונד שמגיעים מהמיקרופון כדי להחליש כל נקודה שנייה במודל התלת מימד. הנקודות מוחצנות בכיוון אליו הן פונות כדי לספק אסתטיקה מרחבית שלא ממש אפשרית עם הנתונים ממצלמה רגילה.

מעבר לזה זה מסתבך למדי. יש הרבה יותר קורה מאחורי הקלעים. אני משתמש בכוחו של הכרטיס הגרפי כדי להחליק את דגם התלת מימד ולחשב שלל נתונים שמזרזים את היישום ובאופן כללי משפר את מראה היצירה. יש לי ממשק משתמש בתוך האפליקציה עם כ-15-20 עמודים של כפתורים וסליידרים המאפשרים לי לצבוט את היצירה עד שאהיה מרוצה. מבחינת הצליל, תנועתו של המשתתף מחושבת ונשלחת לפיסת תוכנה נפרדת שנבנתה ב- Max / MSP על ידי ליאם. לאחר מכן הוא יוצר את תמונת הצלילים המעוותת על סמך כמות הפעילות וכמה גורמים נוספים כמו מיקום וסמיכות. אז אודיו זה נאסף על ידי המיקרופון יחד עם כל צליל אחר בסביבה ומדמה על גוף הנושא.

מה היה ההיבט המספק ביותר מבחינתך לגבי היצירה הספציפית הזו?

אמנם תהליך הלמידה ומעשה הגילוי והסרנדיפיות היו מהנים מאוד, אך החלק הטוב ביותר בפרויקט זה היה התוצאה הסופית. לראות אנשים מגלים ומתקנים את ההתקנה בפעם הראשונה זו חוויה נפלאה, שאני נהנה מכל יצירה שאני מציע לקהל. העמידה אנונימית בחלק האחורי של החדר וצפייה באנשים נהנים מחוויה בלתי צפויה שעבדתי קשה כדי ליצור היא תמיד מתגמלת.

מה הדבר האחרון הגדול שקראתם, ראיתם או שמעתם?

הלכתי לראות את הקטע החדש של אוניברסיטת וירג'יניה "מומנטום" בגלריה של עקומת ברביקן לאחרונה. זה מורכב מסדרה של 12 מטוטלות אור מכניות הנדנדות בצורה אחידה בחלל האפל. האפקט היה מאוד מהורהר ולדעתי מעט מעט מוזר בגלל ההתנהגות הלא טבעית של הזרקורים האיטיים האלה.

מה הלאה?

אני מדבר עם כמה אוצרים על הצגת דו-קוטבית, ובינתיים אני ממשיך לחקור דרכים חדשות לייצג את הגוף באמצעות אינטראקטיביות. אני עובד על כמה פרויקטים כרגע, אשר כמה מהם עומדים ליפול בקרוב, אז תעקוב.

הכניסה לתחרות הווידיאו היא תצוגה המפוצצת את הראש של צליל חזותי ומעוות