איך עושים סטרימינג ותשאול של דאטה עם קפקא ופרסטו? מתחילים במיטאפ הזה

מיטאפ חדש של אירוספייק ישראל יענה על כל השאלות שקשורות לניהול הסטרימינג ותשאול של דאטה בסקייל גבוה, תוך מתן הדרכה פרקטית על שתי מערכות אופן סורס: Presto ו-Kafka

בחינת היבטים שונים כגון סקיילביליות, תפקוד בסביבת פרודקשן ועלויות (צילום: אירוספייק ישראל)

ניהול וצריכה של ביג דאטה בקצבים גבוהים הם משימות מאתגרות עבור אנשי דבאופס, תשתיות ומהנדסי דאטה. תשאול דאטה שיושב במערכות ענק כגון מחסני דאטה (Data Warehouse) או דאטה לייקס (Data Lake) הוא עניין מסובך, בשל ריבוי מקורות הדאטה שמוזרמים, הקושי לוודא את הדיוק של הדאטה והצורך לוודא שהמערכות מתפקדות כל הזמן בצורה אופטימלית. גם הזרמת דאטה בין הקומפוננטות השונות של המערכת היא לא פשוטה בסקייל גבוה: צריך לוודא שהדאטה שעובר הוא תמיד מדויק, מגיע בזמן ולא מקריס את המערכות. וכמובן, כל זה צריך להתבצע תוך שמירה על עלויות סבירות עבור הארגון.

אבל כשעושים את כל זה נכון, ארגונים מצליחים לייצר מוצרי סייבר חכמים ויעילים, למנוע הונאות ולהריץ אלגוריתמים מתוחכמים של בינה מלאכותית.

אז מאיפה מתחילים? מיטאפ חדש של אירוספייק ישראל יענה על כל השאלות שקשורות לניהול הסטרימינג ותשאול של דאטה בסקייל גבוה, תוך מתן הדרכה פרקטית על שתי מערכות אופן סורס: פרסטו (Presto) לתשאול ביג דאטה עם SQL וקפקא (Kafka) להעברת הודעות בארכיטקטורות מבוזרות.

האירוע, "Streaming and Querying Data – A Practical Guide for Using Kafka and Presto", יתקיים ב-23 במאי (18:00-20:15), במשרדי החברה ברחוב השלושה 2 תל אביב. ההשתתפות בחינם ובהרשמה מראש, ובאירוע גם יוגשו נשנושים, פיצות, בירה וקוקטיילים (כי דאטה עושה אותנו רעבים).

המפגש מיועד לנשים ואנשים טכנולוגיים העוסקים בפיתוח וניהול ובחירה של דאטה, ולכל מי שבעבודתם נדרשים לעבד ולנהל דאטה בקצבים גבוהים ונתקלים באתגרים כמו סקיילביליות, עלויות ואינטגרציות.

אז מה יחכה לכם באירוע?

המיטאפ יתמקד בשאלה איך עושים סטרימינג ותשאול של דאטה עם קפקא ופרסטו, תוך בחינת היבטים שונים כגון סקיילביליות, תפקוד בסביבת פרודקשן ועלויות, לצד אינטגרציות עם מערכות נוספות באקוסיסטם של הדאטה. האירוע יכלול ארבע הרצאות מעשיות שיעבירו נציגי ונציגות החברות ריסקיפייד, איירון סורס, סנטינל וואן ואירוספייק ישראל.

את ההרצאה הראשונה תעביר דניס שלזינגר, דירקטורית פיתוח בסנטינל וואן, שתדבר על תשאול ביג דאטה בסקייל עם מערכת פרסטו בסביבה עם טריליון איוונטים ביום.

את ההרצאה שנייה יעבירו אלעד אלדור, מנהל צוות תשתיות דאטה, ואור ארנון, מנהל צוות דבאופס מאיירון סורס. ההרצאה שלהם תכלול כלים מעשיים להרצה וניהול של קלאסטר של קפקא בסביבת פרודקשן בסקייל גבוה של 5 מיליון הודעות בשנייה תוך הימנעות מבעיות שונות.

ההרצאה השלישית, של אלעד ליב, מהנדס דאטה מריסקפייד, תהיה מדריך פרקטי להפחתת עלויות קפקא, למרות הגידול בקצב וכמויות הדאטה המוזרמות. ליב יסביר על מה משלמים כשמריצים קפקא באופן עצמאי, איך להפחית עלויות תשתית ענן ואיך משנים את צורת החשיבה הפיננסית.

לבסוף, זהר אלקיים, ארכיטקט בכיר באירוספייק ישראל, יסביר על האקוסיסטם של אירוספייק וידגים כיצד אפשר לחבר את קפקא ופרסטו לבסיס הנתונים של אירוספייק כדי לעשות סרטימינג ולתשאל דאטה בכל סקייל.

לפרטים נוספים והרשמה

מערכת גיקטיים

גיקטיים, אתר חדשות הטכנולוגיה הגדול בישראל, פועל משנת 2009, ומהווה הבית של קהילת ההייטק, הסטארטאפים והטכנולוגיה בישראל

הגב

רוצה להיות הראשון להגיב?

avatar
Photo and Image Files
 
 
 
Audio and Video Files
 
 
 
Other File Types
 
 
 

* היי, אנחנו אוהבים תגובות!
תיקונים, תגובות קוטלות וכמובן תגובות מפרגנות - בכיף.
חופש הביטוי הוא ערך עליון, אבל לא נוכל להשלים עם תגובות שכוללות הסתה, הוצאת דיבה, תגובות שכוללות מידע המפר את תנאי השימוש של Geektime, תגובות שחורגות מהטעם הטוב ותגובות שהן בניגוד לדין. תגובות כאלו יימחקו מייד.

wpDiscuz

תגיות לכתבה: