כיצד להעביר 2TB לענן ב-10 דקות?
כיצד מעבירים כמות עצומה של מידע בתוך 10 דקות לענן? רמז: הדרך המהירה ביותר היא גם הפרמיטיבית ביותר
צילום: flickr, cc-by, GlenBledsoe
קודם כל התנצלות – לא כתבתי יותר מחודש וזה ממש לא בסדר! לא שקרה משהו מסעיר בעולם הענן בחודש האחרון (למרות שכל יום קורא משהו אבל זה More of the same). נכון, Apple יצאו עם iCloud וזה הולך להיות להיט, כמו רוב מוצרי Apple, אבל לא מדובר בחידוש טכנולוגי (אם כי שימושי בהחלט). חוץ מזה די שקט. ולמרות השקט, החברה של אמזון ממשיכים לספק פיצ'רים אחת לשבועיים והאחרון שבהם נראה מעניין מאד…
נגיד שאתם מפתחים אתר וידאו (או מוזיקה או כל תוכן הדורש משאבי דיסק גדולים) או סתם רוצים להעביר את מסמכי הגרעין של ישראל לענן (מוצפנים כמובן!). אחרי שסיימתם את הפיתוח, החלטתם שהמקום האידאלי לאירוח הפרוקיט הוא AWS וכל מה שנשאר זה להעלות את הפרוקיט לשרתים של אמזון. קלי קלות? אז זהו שלא!
2 טרה בייטים בחמישה חודשים
אם יש לכם 2TB של נתונים להעלות לאמזון וקו T1, יקח לכם יותר מ – 160 יום להעלות את החומר. גם אם יש לכם קו של 10 מגה, שרובו מוקדש להעלאת אותם נתונים, עדיין יארכו מעל 25 ימים עד שתסיימו את התהליך (בתקווה שספק האינטרנט שלכם יציב ולא היתה הפסקת חשמל בדרך).
מה עושים? משתמשים בשרות של אמזון (שהורחב לאחרונה וכולל תמיכה ב – EBS וזה החידוש הגדול), להעברת מדיה פיזית (כן, מדובר בדיסקים קשיחים, התקני USB וכל מה שניתן לחבר ב – SATA, eSATA או USB) לשרותי ה – EBS או ה – S3 של אמזון. כל מה שאתם צריכים זה דיסק גדול מספיק עליו המידע שאתם רוצים להעביר ו – 10 דקות על מנת להצטרף לשרות, למלא מספר טפסים ולשלוח את המדיה בדואר, כפי שניתן לראות בתרשים הבא:
השירות הוא פתרון מצויין לכל מי שיצא לו להתעסק בהעברת כמויות גדולות של נתונים בין חוות שרתים (שאגב חלק מהספקים מספקים שירותים מסוג זה גם מחוץ לענן), בין אם מדובר במעבר לענן של אמזון ממקום אחר, העברת נתונים לצורכי גיבוי או DR או כל צורך אחר. יצא לי יותר מפעם אחת להקים סביבות שונות בהן היה צורך לייבא (ובמקרים רבים גם לדאוג לכך שהנתונים מסונכרנים) כמויות גדולות של נתונים ממקום אחר. שימוש במדיה פיזית היה חוסך זמן רב וכאמור, לא תמיד מדובר בזמן ההעתקה נטו אלא בבעיות שונות ומשונות של אמינות קווי תקשורת וציוד אחר, הגורמים במקרים מסויימים לאיבוד שעות של עבודת העברה. למי שניסה להעביר מערכות עם כמויות גדולות של קבצים (מספר רב של קבצים קטנים, לאוו דווקא גודל כולל), כגון SVN של כמה אלפי Revisions, יודע עד כמה שירות מסוג זה יכול לעזור.
אמזון מספקת מחשבון שיעזור לכם להעריך כמה תעלה טעינת החומר שלכם (בדוגמא שלנו, דיסק SATA של 2TB, כולל משלוח חזרה של הדיסק לישראל, תעלה הטעינה כ – $200) ואת כל המידע הטכני איך מכינים את החומר למשלוח, ניתן למצוא בעמודי הדוקומנטציה של אמזון. בנוסף לשירות טעינת הנתונים, אמזון מספקת גם את הכיוון ההפוך של הורדת חומר להתקנים פיזיים. שירות זה זמין אך ורק לנתונים השמורים ב – S3 והעלויות דומות מאד בשני המקרים.
הפוסט פורסם לראשונה בבלוג מעונן חלקית
בועז זינימן
בועז זינימן מנהל את מעונן חלקית, בלוג בעברית המוקדש ברובו למחשוב ענן (Cloud Computing) וטכנולוגיה בכלל. בועז משמש כדירקטור טכנולוגיה ותשתיות ענן בחברת Zend Technologies ובארבעת השנים האחרונות הוא ניהל את הצוותים הטכנולוגיים ב – Zend, כולל תיכנון ופיתוח כל מערכות ה – Web, פתרונות Hosting, אסטרטגיית IT ותשתיות.
הגב
1 תגובה על "כיצד להעביר 2TB לענן ב-10 דקות?"
* היי, אנחנו אוהבים תגובות!
תיקונים, תגובות קוטלות וכמובן תגובות מפרגנות - בכיף.
חופש הביטוי הוא ערך עליון, אבל לא נוכל להשלים עם תגובות שכוללות הסתה, הוצאת דיבה, תגובות שכוללות מידע המפר את תנאי השימוש של Geektime, תגובות שחורגות מהטעם הטוב ותגובות שהן בניגוד לדין. תגובות כאלו יימחקו מייד.
מזכיר לי ניסוי שנערך ב-2004 על העברת נתונים עם יוני דואר (באמת!)
http://tech.walla.co.il/?w=/4/519043