זוכרים את ׳׳תא הפגישות׳׳ המוזר של גוגל? כך הוא עומד לגרום לכם להרגיש שאתם משוחחים ׳׳פנים מול פנים׳׳

במאי הציגה גוגל את מה שנראה כמו הגרסה האולטימטיבית לשיחת זום. כעת היא מסבירה איך זה עובד, אבל לא עונה על השאלה החשובה ביותר: מתי אנחנו נוכל להשתמש בזה?

פרויקט Starline, כך זה ייראה | מקור: גוגל

גוגל חשפה בכנס המפתחים האחרון שלה, I/O 2021, שנערך בחודש מאי האחרון כמה פרויקטים מעניינים. אחד מהם הוא פרויקט Starline – מעין תא שנוכל לגשת אליו ולקיים בו שיחות "פנים אל פנים", כשבפועל מי שיישב מולנו בתא הזה יוכל להיות בכל נקודה אחרת בעולם, אבל להראות כאילו הוא ממש יושב מולנו. אחרי שלא פירטה יותר מדי בנוגע לטכנולוגיה שמאחורי הפיתוח המעניין, מאמר חדש חושף איך זה יעבוד מאחורי הקלעים.

10 מצלמות ומערך סאונד מתוחכם

צוות החוקרים שעבד על פרויקט סטארליין בשנים האחרונות פרסם לאחרונה מאמר בנושא המציג את הטכנולוגיה שמאחורי הפיתוח שנראה כמו התחליף הכי נחמד לזום שראינו בתקופה האחרונה. בסרטון שבו מציגים החוקרים את המאמר, הם מפרטים באילו רכיבים בדיוק הם השתמשו כדי לייצר תמונה ריאליסטית של אדם היושב מול מי שנכנס לתא של סטארליין.

זה מתחיל בתצוגה: מדובר במסך 65 אינץ' ברזולוציית 8K ובקצב רענון של 60 הרץ. מי שישבו מולה במרחק של 1.25 מטר – מה שקורה עבור המשתמשים בתא של סטארליין – יצפו במי שמולם ברזולוציה הכפולה מזו שמקבלים המשתמשים במשקפי VR כמו אוקולוס קווסט 2 ו-Vive Pro 2 של HTC.

בכל תא של סטארליין יש ארבע מצלמות למעקב אחרי הפנים של בני השיחה, וספציפית אחר העיניים, האוזניים והפה שלהם – לטובת תמונה מדויקת ככל האפשר של שני הצדדים שתוצג על המסך. כדי לייצר חוויית סאונד של הימצאות בני האדם באותו המרחב, סטארליין כולל מערך של ארבעה מיקרופונים ושני רמקולים. שני הרמקולים אמנם נמצאים בשני הצדדים, אבל בעזרת מצלמות המעקב אחרי פני האדם המאזין, הוא ישמע את הקול של מי שמדבר כאילו הוא יצא מפיו במסך שממול.

כך נראה המסך ושלל החיישנים שסביבו ב-Starline | צילום מסך

כדי לייצר תמונת תלת-מימד של כל אחד מהמשתתפים בשיחה, כל תא של הפרויקט מבית גוגל כולל שלוש קבוצות מצלמות שלהן קראו החוקרים "תאים". בכל תא יש שתי מצלמות אינפרה-אדום ומצלמה רגילה, כשבתא שנמצא מתחת לתצוגה יש שתי מצלמה רגילה נוספת המכוונת רק לפני האדם המדבר כדי לייצר תמונה חדה יותר. מערך החיישנים כולל גם מקרני אינפרה-אדום כדי לסייע בייצור תחושת העומק של האדם שממול – כדי שירגיש כאילו הוא פיזית באותו המקום.

כחלק מהעברת השיחה בזמן אמת, המערכת של סטארליין דוחסת את הווידאו כדי לשדר אותו בין שני הצדדים בזמן אמת. צוות החוקרים מדווחים כי כדי להריץ שיחה כזו בצורה מיטבית, בניגוד לשיחת זום למשל, תצטרכו רוחב פס של בין 30 ל-100Mbps. לא מעט עבור מי שעדיין תקוע עם חיבור בזק מיושן, אבל בהחלט משהו אפשרי למי שמחוברים היום לסיב אופטי – גם דרך WiFi.

כל החיישנים של Starline | צילום מסך

כדי להתמודד עם כל העיבוד הגרפי הזה בזמן אמת, כוללת המערכת של גוגל ארבעה כרטיסים גרפיים מבית NVIDIA, שני מעבדי Quadro RTX 6000 ושני מעבדי Titan RTX, המקודדים בזמן אמת את כמות המידע הגרפי האדירה שנאספת ומתקבלת כדי לייצר שיחה בסטארליין.

כחלק מהמחקר במסגרת פרויקט סטארליין, 117 עובדים בשלושה אתרים שונים של גוגל זכו להשתמש בתא השיחות וקיימו בו 308 פגישות. אורך הפגישה הממוצע היה בערך 35 דקות, כשעל פי המחקר כ-87% מכלל המשתמשים במערכת טענו כי היא טובה יותר מביצוע שיחת וידאו רגילה במחשב כמו פשוטי העם.

ולמרות שחשפה לא מעט מבחינת מה שקורה מאחורי הקלעים של המוצר המאוד ניסיוני שלה, גוגל (וגם לא חוקריה) טרם חשפה מידע כלשהו מבחינת לוח זמנים של הגעת המכשיר לשוק הרחב – גם אם ב-Preview או כניסוי לכמה בני מזל. היא גם לא חשפה מידע על העלות האפשרית של דבר כזה, שלפחות ממה שאנחנו מנינו פה בכל הקשור לרכיבים שעליהם מתבסס Starline – כנראה תהיה משמעותית ובכל מקרה לא תתאים לרוב המוחלט של החברות והעסקים שאולי ישקלו לקנות משהו כזה.

כל הכתבות והעדכונים מעולם הטכנולוגיה וההייטק כל הכתבות והעדכונים מעולם הטכנולוגיה וההייטק מחכים לך עכשיו בערוץ גיקטיים בטלגרם

אושרי אלקסלסי

Your Friendly Neighborhood Geek. יש לכם סיפור טכנולוגי? דברו איתי: [email protected]

הגב

7 תגובות על "זוכרים את ׳׳תא הפגישות׳׳ המוזר של גוגל? כך הוא עומד לגרום לכם להרגיש שאתם משוחחים ׳׳פנים מול פנים׳׳"

avatar
Photo and Image Files
 
 
 
Audio and Video Files
 
 
 
Other File Types
 
 
 

* היי, אנחנו אוהבים תגובות!
תיקונים, תגובות קוטלות וכמובן תגובות מפרגנות - בכיף.
חופש הביטוי הוא ערך עליון, אבל לא נוכל להשלים עם תגובות שכוללות הסתה, הוצאת דיבה, תגובות שכוללות מידע המפר את תנאי השימוש של Geektime, תגובות שחורגות מהטעם הטוב ותגובות שהן בניגוד לדין. תגובות כאלו יימחקו מייד.

סידור לפי:   חדש | ישן | הכי מדורגים
אבי
Guest

עכשיו יקר –
מחר בזול…
ובעברית: זה משהו ראשוני. בהמשך העלויות יוזלו, ותחרות תפתח.
זה יהיה מגניב…

אבי
Guest

היי! בעצם לא קיבלנו תשובה לשאלה, איך מסך יחיד, יכול לעבוד בתלת מימד!
אולי יש מעקב איפה הצופה נמצא, ולפי זה התצוגה מתכווננת?

קוקו
Guest

תראה ערך 3DS איך הם עשו את זה בקונסולה קטנה , מניח שזה עובד על אותו עקרון שכל פקסל בזווית אחרת לכל עיין מה שגורם להשליה התלת מימדית.

שושלי
Guest

נשמע כאב ראש…

ישי אברהם
Guest

בצד של האדם השני יש מצלמות המצלמות אותו מכמה זוויות, ובצד שלך יש מצלמות שעוקבות מאיפה אתה מסתכל. המערכת משלבת את המידע גורמת לכך שתראה בכל פעם וידיאו מהמצלמה שמסתכלת על האדם השני מזווית שאתה היית רואה אותו לפי המקום שאתה מסתכל. נגיד אתה עובר לצד ימין אז יוצג לך וידיאו של מצלמה שמסתכלת על הצד השני מצד ימין, מה שאומר שזה תלת מימדי כי קיבלת זווית חדשה שמתאימה למיקום שלך

בניה
Guest

מסך 8k ורק 87% טוענים שזה יותר טוב ממחשב… מביך

גיימבוי
Guest

משקפי AR אמורים להפוך את זה למיותר, לא?

wpDiscuz

תגיות לכתבה: