The Apache Software Foundation הכריז על Hadoop 3.
בין השיפורים בגרסא החדשה:
HDFS מחיקת קידוד -מורידה לחצי את עלות האחסון של HDFS תוך שיפור עמידות הנתונים;
YARN ציר זמן שירות v.2 (תצוגה מקדימה) - משפר את יכולת ההרחבה, האמינות, ואת השימושיות של Timeline Service.
YARN סוגי משאבים - אפשר תזמון של משאבים נוספים, כגון דיסקים GPUs, לשילוב טוב יותר עם למידה מכונה ועומסי עבודה ;
חיבור של YARN וHDFS המאפשר פרישה לאלפי מכונות.
ביצוע מכולות הזדמנות משפרת את ניצול המשאבים ומגדילה את תפוקת המשימות עבור מכולות קצרות. בנוסף לתזמון המרכזי המסורתי שלו, YARN תומך גם בתזמון מבוזר של מכולות אופורטוניסטיות; ו
שיפור יכולות ושיפור ביצועים עבור מערכות אחסון ענן כגון אמזון S3 (S3Guard), Microsoft Azure Data Lake, ו Aliyun .
למקור: הקישו כאן.
תסתכלו גם בסרטונים הבאים:
https://www.youtube.com/watch?v=GGGO-qqcNCI
https://www.youtube.com/watch?v=N4WzQ1H5h5I
https://www.youtube.com/watch?v=mBDmCU8VGhk