מרשים: מפתח יצר ”העתק-הדבק” לעולם האמיתי ושיחרר את זה כקוד פתוח
איך לא חשבו על זה קודם? מפתח בגוגל מציג: ”העתק-הדבק” למציאות
תמונה: @cyrildiagne
אנחנו אולי לוקחים אותה כמובן מאליו, אבל המצאת ה”העתק-הדבק” די שינתה את חיינו, והיא נמצאת כמעט בכל ממשק משתמש, אבל מה אם היה לנו “העתק-הדבק” לעולם האמיתי? מפתח בשם סיריל דיאן, שעובד ב-Google Arts, הצליח ליצור כלי מציאות רבודה שמאפשר לכם לקחת אלמנטים מהעולם האמיתי, ופשוט לשתול אותם ברגע במחשב.
6 שניות, ומה שצילמתם נמצא במחשב שלכם
כפי שניתן לראות בסרטון שדיאן עלה, כל שהוא עושה הוא לצלם את האובייקט הנחוץ, ולאחר מספר שניות הוא “נגזר” מהמציאות. לאחר מכן דיאן מכוון את הסמארטפון אל הלפטופ שלו שמריץ את פוטושופ, ובנגיעה הבאה אותו אובייקט פשוט “מודבק” במיקום אליו הצביעה המצלמה. הסרטון הרשים אפילו את מי שמנהל את חשבון הטוויטר הרשמי של פוטושופ שצייץ: “Cut it out. No, seriously” ושיתף את הסרטון המקורי.
4/10 – Cut & paste your surroundings to Photoshop
Code: https://t.co/cVddH3u3ik
Book: @HOLOmagazine
Garment: SS17 by @thekarentopacio
Type: Sainte Colombe by @MinetYoann @ProductionType
Technical Insights: ↓#ML #AR #AI #AIUX #Adobe #Photoshop pic.twitter.com/LkTBe0t0rF— Cyril Diagne (@cyrildiagne) May 3, 2020
דיאן טוען שה”סוד” של ההעתקה היא השימוש בכלי בשם BASNet, שמאפשר זיהוי אובייקטים והסרה של הרקע שמסביבם. לאחר מכן, הוא משתמש ב-OpenCV SIFT שמאפשר לו להבין לאן המצלמה מכוונת, מה שמספק קואורדינטות x ו-y מדוייקות, ומדביק את התמונה שנגזרה בשלב הקודם. נכון לעכשיו, תהליך הגזירה אורך כ-2.5 שניות, ותהליך ההדבקה אורך כ-4 שניות, אך דיאן טוען כי הוא יכול לזרז את התהליך בהמשך.
דיאן כלל לא מגביל את היכולת הזאת לפוטושופ, ובאופן תיאורטי, יהיה ניתן למצוא דרכים להשתמש בה גם בתוכנות אחרות. דיאן שיחרר את הקוד מאחורי הכלי כקוד פתוח ב-GitHub, ככה שאתם יכולים לחטט בו באופן חופשי, ולשפר אותו בעצמכם.
נזכיר כי ממש לפני חודשים ספורים נפטר לארי טסלר, מהנדס המחשבים שהמציא את ה”העתק-הדבק”.
עידן בן טובים
נולד עם ג׳ויסטיק ביד. יש לו הרבה יותר מדי גאדג׳טים והרבה פחות מדי זמן פנוי כדי לשחק עם כולם. בעל פטיש לא מוסבר לביצוע קליברציות לסוללות של מכשירים. כשהוא לא עסוק בלכתוב על טכנולוגיה, הוא אוהב לדבר עליה, והרבה
הגב
8 תגובות על "מרשים: מפתח יצר ”העתק-הדבק” לעולם האמיתי ושיחרר את זה כקוד פתוח"
* היי, אנחנו אוהבים תגובות!
תיקונים, תגובות קוטלות וכמובן תגובות מפרגנות - בכיף.
חופש הביטוי הוא ערך עליון, אבל לא נוכל להשלים עם תגובות שכוללות הסתה, הוצאת דיבה, תגובות שכוללות מידע המפר את תנאי השימוש של Geektime, תגובות שחורגות מהטעם הטוב ותגובות שהן בניגוד לדין. תגובות כאלו יימחקו מייד.
יש למישהו apk להורדה?
לא טרחת להכנס לריפו הא? זו אפליקציית ווב וצריך להריץ גם צד שרת
וואאו דמיינו שיתוף פעולה בין :
Zoom
Amd
Deepfake
והדבר הזה….
אפשר לייצר שיחות במציאות רבודה
כך שהסביבה כולל העצמים הנגישים שבה (כיסאות שולחנות ושאר דברים הקשורים לפגישה ) מתכנסים לכדי סביבה אורגנית אחת …שמאפשרת דו שיח הכי קרוב למציאות….תארו לכם אלגוריתם שיודע לקחת מכל משתמש את הסביבה הנגישה שלו ולבנות מיקס לכולם כולל בחירה של אובייקטים מסויימים מתוך המרקע הקשורים לפגישה …קיצר זה יכול להיות הדבבררר
הרעיון יפה.. אבל. הסרטון נראה ערוך מידיי ולא מציאותי.
יש גם כמה פעמים שיש לג בתמונה
מרשים !
עכשיו צריך הפוך… מצלמים הרבה הריטים בחנות ובעזרת המצלמה ומציאות רבודה משלבים אותם בחלל הבית ובוחרים את המתאים ביותר.
אפשר אפילו לצלם מטבחים ובעזרת AI לשלב אותם אחרי התאמות.
חשבתי מהכותרת שהוא מדפיס את הרהיטים שצולמו במדפסת תלת מימד
טוב, אני מהעתיקים.
אז אולי מישהו יכול לומר לי איך מורידים את זה לטלפון אנדרואיד כי בשבילי זה פתרון מעולה.
תודה מראש