מפתחים ישראליים יצרו ”קינקט” עם מצלמה שעולה 10 דולר וקוד פתוח של גוגל

מיקרוסופט אולי כבר לא בקטע של הקינקט, אותו בקר מופלא שעלה כ-150 דולר, אבל 2 מפתחים ישראליים הצליחו לייצר בקר דומה שמתבסס על מצלמה זולה ו-TensorFlow, פלטפורמת למידת המכונה של גוגל

אחד האביזרים המרשימים של קונסולת ה-Xbox של מיקרוסופט היה ללא ספק הקינקט – מצלמת העומק שעוקבת אחרי תנועות הגוף של השחקן ומאפשרת לו לשחק באמצעות גופו. עם זאת, החליטה לאחרונה מיקרוסופט להיפרד מהקינקט ולמכור את הקונסולות שלה ללא האביזר. כל זה לא הפריע ל-2 מפתחים ישראלים לייצר חוויה דמויית קינקט במחיר נמוך משמעותית.

10 דולר במקום 150 דולר

מערכת מעקב אחרי תנועות הגוף – כמו שתוכלו למצוא באולפני אנימציה ומשחקים – היא פיתוח יקר שדורש בין היתר מצלמות ברזולוציה גבוהה, חיישנים אותם יש ללבוש על הגוף ומחשבי גיימינג עם יכולות עיבוד מתקדמות. אפילו הקינקט, יישום פשוט יותר של הטכנולוגיה, עלה כ-150 דולרים. אבל שני מפתחים ישראלים, אור פליישר ודרור אילון, הצליחו להגיע לתוצאות יפות בעזרת מצלמה שעולה 10 דולר ו-TensorFlow, פלטפורמת למידת המכונה הפתוחה של גוגל.

הפרויקט, ששמו Skeletron (סקלטרון), נבנה כחלק מקבוצת מחקר במעבדת המדיה של אוניברסיטת ניו יורק (NYU). הפרויקט משלב בין המצלמה, פלטפורמת ה-AI של גוגל ו-Unity – פלטפורמת פיתוח המשחקים התלת ממדיים – בצורה הבאה: מודל ה-AI לוקח את הווידאו שלוכדת המצלמה וחוזה היכן אמור להימצא כל איבר בכל רגע; הנתונים עוברים ל-Unity, ושם נוצר המודל תלת הממדי בהתאם לחיזוי של מודל ה-AI.

כרגע הפרויקט מאפשר חוויית שימוש שמזכירה את בקר הקינקט, אולם בשיחה עם גיקטיים אומר פליישר, במאי ומתכנת במקצועו, שאחת החוויות שהם עובדים עליה היא מנוע חיפוש לסרטים, שעל ידי הזזת הגוף יעבור אלפי סרטים וימצא את אלה שבהם אחת הדמויות זזה באופן דומה, מה שיאפשר חוויית חיפוש לגמרי שונה מכל מה שאנחנו מכירים כיום. לדברי פליישר, השניים בוחנים פרויקטים כמו deeplearn.js, שמאפשרים להריץ ולאמן מודלים של בינה מלאכותית בדפדפן, ולאפשר ליותר ויותר אנשים להתנסות עם הטכנולוגיה ולפתח חוויות מזן חדש. בכל מקרה, פליישר מסביר שהם ישחררו בקרוב את כל הניסויים והתוכנה כקוד פתוח.

מה גרם לכם לעשות את זה?

“שנינו אנשי טכנולוגיה שבעבר השתמשנו במצלמת הקינקט לפרויקטים רבים. ברגע שמיקרוסופט הודיעו כי הם יפסיקו לייצר את המצלמה, החלטנו להתחיל לחפש אלטרנטיבות. אנחנו מקווים ש׳סקלטרון׳ יאפשר לאנשי קריאייטיב וטכנולוגיה נוספים להמשיך לבנות אינטראקציות פיזיות עם מחשבים, אלמנט שהוא בלתי ניתן להפרדה מסצנת האומנות הדיגיטלית בימים אלו”.

יניב אביטל

עורך אתר גיקטיים, ובזמנו החופשי גיק, קופירייטר, אבא, חולה על גאדג'טים וקוד, לא בהכרח בסדר הזה

הגב

4 תגובות על "מפתחים ישראליים יצרו ”קינקט” עם מצלמה שעולה 10 דולר וקוד פתוח של גוגל"

avatar
Photo and Image Files
 
 
 
Audio and Video Files
 
 
 
Other File Types
 
 
 
סידור לפי:   חדש | ישן | הכי מדורגים
קינק
Guest

אפשר לקנות את הקינקט הישן למפתחים בהרבה פחות מ 150 דולר..

מהנדס
Guest

אין פה באמת חדשנות, יש הרבה פתרונות בקוד פתוח לשערוך “פוזת גוף”

לא ממש הבנתי
Guest

כל יום יוצא בgithub אלגוריתם חדש ומשופר שעושה בדיוק את זה
הראשון הופיע לפני כשנתיים…בגלל האלגוריתמים האלו מיקרוסופט נטשו את הkinect
אז מה בדיוק החידוש פה?

igurenko
Guest

its a logitech c920 webcam which priced about 100$

wpDiscuz

תגיות לכתבה: