השיגעון הבא? ישראלי פיתח מודל שיהפוך אתכם לדמות מסרט של פיקסאר או דיסני
זה Toonify של הישראלי דורון אדלר, שלוקח את הפרצוף שלכם והופך אתכם בעזרת למידת מכונה לדמות מצוירת מסרט של פיקסאר
מקור: Toonify
לאורך השנים קמו לא מעט (בלשון המעטה) אפליקציות שמפלטרות את הפרצופים שלכם בדרכים שונות – בין אם זה הפיכה לקשישים או תינוקות, שינוי מגדר או סתם פילטר שמדביק לכם משקפי שמש על הפרצוף. אבל מפתח ישראלי לקח את זה שלב אחד קדימה ונעזר בלמידת מכונה כדי להפוך אתכם לדמות מתוך סרט של פיקסאר, גם אם קצת מקריפה.
לאמן את StyleGAN2 עם דמויות מצוירות
Toonify הוא מודל מבוסס למידת מכונה שייקח את תמונת הפרצוף שתזינו אליו ויהפוך אתכם לדמות פיקסאר. המודל נוצר על ידי הישראלי דורון אדלר ושותפו ג'סטין פינקני. המיזם החל כפרויקט של אדלר, שצייץ על כך ועורר את סקרונותו של פינקני – ומשם נולד הפיתוח החדש.
בשיחה עם גיקטיים מספר אדלר כי מה שהוביל אותו ליצירת המודל הוא פשוט החיבה למודלים גנרטיביים, מודלים כמו GAN (או Generative Adversarial Network) הלוקח תמונות שהזנתם אליו כדי לאמן אותו ומייצר תמונות חדשות לחלוטין.
"אני מאוד נהנה מהעיסוק והחקר של דברים שניתן לעשות איתם. כשראיתי את התוצאה של אלגוריתם ערבוב השכבות ב-StyleGAN2 (מבית Nvidia, א.א.) של ג'סטין לפרצופי Ukiyo-e ממש התלהבתי, ורציתי לראות איך זה יראה עם מודל שפעם עשיתי לו Fine tuning לפרצופים של דמוייות מדיסני, פיקסאר ודרימוורקס".
StyleGAN2 הוא framework שיכול לייצר ללא הפסקה פרצופים של אנשים שלא קיימים (אתם אולי זוכרים את האתר thatpresondoesnotexist.com), ואדלר החליט להזין לתוכו פרצופים של דמויות מצוירות על פני דמויות אנושיות כדי לאמן אותו לייצר פרצופים מסוג זה. הוא אף עשה זאת בעבר על ידי אימון StyleGAN2 על תמונות של חבובות כדי ליצור תמונות של חבובות חדשות (במה שנראה כמו סרטון פסיכדלי לחלוטין).
היינו חייבים לבדוק את זה: כותב שורות אלו כדמות פיקסאר מקריפה
השניים לקחו את העבודה המשותפת לשלב הבא, אחרי שפינקני ראה את העבודה של אדלר על המודל שלו. "הוא ממש התלהב ושאל אותי אם ארצה לנסות לקחת את זה 'צעד אחד קדימה'. לייצר המון המון זוגות כאלו ולאמן מודל שנקרא Pix2PixHD שרץ היטב על CPU ולא דורש GPU, שיוכל לאפשר לכל אחד לעשות Toonify עם תמונה", מספר אדלר.
השניים יצאו לדרך והעלו את האתר לאוויר אחרי שאימנו את מודל ה-Pix2PixHD. אדלר מספר כי הייתה להם הצלחה אדירה בזמן קצר: "כ-20 שעות לאחר העלאת האתר כבר היו לו אלפי משתמשים בו זמנית. העלויות התחילו להיראות מדאיגות, תוך פחות מיממה זה התקרב כבר ל-100$ והאתר רק נהיה יותר ויותר פופולארי. החלטנו לסגור. בזמן הקצר הזה שהאתר היה באוויר בסביבות רבע מליון תמונות עברו טוניפיקציה". האתר ירד מהאוויר למשך כשבוע וחצי, אבל אחרי שאדלר ופינקני הצליחו למצוא ל-Toonify בית חדש תחת DeepAI.org הוא עלה שוב לאוויר.
שאלנו את אדלר את שאלת מיליון הדולר – עד כמה הם מודעים לעובדה שהוא מייצר פרצופים מקריפים והאם הם סבבה עם זה? לדבריו, זה לגמרי בגלל אפקט "עמק המוזרות" (או Uncanny Valley) שלפיו העתקים מלאכותיים הדומים לנו, אך לא באופן מושלם, נראים לנו מוזר ואפילו גורמים לנו להרגיש לא נוח. "אנחנו דיי סבבה עם זה, באופן מעניין, זה הפך לחלק מהגימיק של האתר", אומר אדלר.
הוא ופינקני, שני שכירים ב-day-jobs שלהם, ממשיכים לעבוד יחד. הם עובדים על יצירת גרסאות שונות למודל שיצרו, תמיכה ביותר מפרצוף אחד בתמונה ב-Toonify ובנוסף עובדים על מודלים שונים – אך עדיין מדובר בתחביב שהעבודה עליו היא רק בזמנם החופשי.
מה לגבי פרטיות? נגד אפליקציות דומות הועלו לא פעם טענות על מדיניות פרטיות מפוקפקת, אולם אדלר מרגיע ואומר שאף תמונה לא נשמרת על השרתים לאחר שהמודל של DeepAI מסיים לעבד אותה.
האתר מחכה לכם כאן
אושרי אלקסלסי
Your Friendly Neighborhood Geek. יש לכם סיפור טכנולוגי? דברו איתי: [email protected]
הגב
6 תגובות על "השיגעון הבא? ישראלי פיתח מודל שיהפוך אתכם לדמות מסרט של פיקסאר או דיסני"
* היי, אנחנו אוהבים תגובות!
תיקונים, תגובות קוטלות וכמובן תגובות מפרגנות - בכיף.
חופש הביטוי הוא ערך עליון, אבל לא נוכל להשלים עם תגובות שכוללות הסתה, הוצאת דיבה, תגובות שכוללות מידע המפר את תנאי השימוש של Geektime, תגובות שחורגות מהטעם הטוב ותגובות שהן בניגוד לדין. תגובות כאלו יימחקו מייד.
וואלק עשו לי גבות של גרוזיני מה זה
לא משהו
עכשיו רק צריך מודל שיהפוך תמונה לדמות ממשפחת סימפסון
זה פינקני, פינקני והמוח, מוח, מוח….
לפחות בדמות יש לי שיער
לא עושה עבודה טובה. זה יוצר אדם שונה לגמרי ולא את אותו אדם בגרסת הקרטון שלו. מפתיע שהחרא הזה זכה בכלל להתייחסות תקשורתית.