डेढ़ साल के विकास के बाद, अपाचे सॉफ्टवेयर फाउंडेशन ने जारी किया है के नए संस्करण का शुभारंभ अपाचे हडूप 3.3.0, संस्करण जिसमें इसने एआरएम प्लेटफार्मों के लिए सुधारों को जोड़ा, शेड्यूलिंग कंटेनर लॉन्च और अन्य चीजों के लिए समर्थन।
Apache Hadoop खुद को एक फ्री प्लेटफॉर्म के रूप में रखता है व्यवस्थित करने के लिए का उपयोग कर बड़ी मात्रा में डेटा का प्रसंस्करण वितरित किया नक्शा / प्रतिमान कम करें, जिसमें एक कार्य को कई छोटे पृथक हिस्सों में विभाजित किया गया है, जिनमें से प्रत्येक एक अलग क्लस्टर नोड पर चल सकता है।
Hadoop- आधारित भंडारण यह हजारों नोड्स को फैला सकता है और इसमें डेटा का निकास हो सकता है।
Apache Hadoop के बारे में
Hadoop Hadoop वितरित फ़ाइल सिस्टम का कार्यान्वयन शामिल है (HDFS), जो स्वचालित रूप से डेटा अतिरेक प्रदान करता है और MapReduce अनुप्रयोगों के लिए अनुकूलित है।
एक महत्वपूर्ण कार्यक्षमता यह है कि प्रभावी नौकरी निर्धारण के लिए, प्रत्येक फ़ाइल सिस्टम को पता होना चाहिए और उसका स्थान प्रदान करना चाहिए, रैक का नाम (अधिक सटीक, स्विच का) जहां कार्यकर्ता नोड है।
Hadoop एप्लिकेशन इस जानकारी का उपयोग उस नोड पर काम चलाने के लिए कर सकते हैं, जहां डेटा है और, विफल, उसी रैक / स्विच पर, इस प्रकार नेटवर्क ट्रैफ़िक को कम करता है।
डेटा तक पहुंच को आसान बनाने के लिए Hadoop भंडारण में, HBase डेटाबेस और SQL जैसी सुअर भाषा विकसित की गई है, जो MapReduce के लिए एक SQL प्रकार है, जिसके प्रश्नों को विभिन्न Hadoop प्लेटफार्मों द्वारा समानांतर और संसाधित किया जा सकता है।
परियोजना का मूल्यांकन पूरी तरह से स्थिर है और औद्योगिक संचालन के लिए तैयार है। Hadoop सक्रिय रूप से बड़ी औद्योगिक परियोजनाओं में उपयोग किया जाता है, Google Bigtable / GFS / MapReduce प्लेटफ़ॉर्म के समान क्षमताएं प्रदान करता है, जबकि Google आधिकारिक तौर पर Hadoop और अन्य अपाचे परियोजनाओं को सौंपता है, जो MapRedos विधि से संबंधित पेटेंट-कवर की गई तकनीकों का उपयोग करने के हकदार हैं।
Hadoop पहले किए गए परिवर्तनों की संख्या और पांचवें सबसे बड़े कोड बेस (लगभग 4 मिलियन लाइनों के कोड) के संदर्भ में अपाचे रिपॉजिटरी में पहले स्थान पर है।
Apache Hadoop 3.3 में नया क्या है?
Hadoop का यह नया संस्करण पहले संस्करण के रूप में तैनात किया गया है el एआरएम-आधारित प्लेटफार्मों के लिए समर्थन, जिसके साथ इस प्लेटफ़ॉर्म को लागू करने में रुचि रखने वाले लोग पहले से उपलब्ध एआरएम के लिए द्विआधारी खोजने में सक्षम होंगे।
इस नए संस्करण में प्रस्तुत किए गए मुख्य परिवर्तनों में से एक है प्रोटोबॉफ़ प्रारूप के नए संस्करण का कार्यान्वयन (प्रोटोकॉल बफ़र्स) संरचित डेटा को क्रमबद्ध करने के लिए उपयोग किया जाता है 3.7.1 संस्करण में अद्यतन किया गया है प्रोटोबोफ़ -2.5.0 शाखा के जीवन चक्र के अंत के कारण।
इसके अलावा, यह भी S3A कनेक्टर की क्षमताओं का पहले ही विस्तार हो चुका है अब उसके पास है टोकन का उपयोग करके प्रमाणीकरण के लिए अतिरिक्त समर्थन, 404 कोड, उच्च S3guard प्रदर्शन और बेहतर परिचालन विश्वसनीयता के साथ प्रतिक्रिया कैशिंग के लिए बेहतर समर्थन।
भी DNS रिज़ॉल्वर सेवा जोड़ी गई क्लाइंट के लिए होस्ट नाम से DNS के माध्यम से सर्वरों को निर्धारित करने के लिए, जो आपको कॉन्फ़िगरेशन में सभी मेजबानों की सूची से दूर करने की अनुमति देता है।
साथ ही साथ शेड्यूलिंग कंटेनर के लिए समर्थन एक केंद्रीकृत संसाधन प्रबंधक के माध्यम से लॉन्च होता है (संसाधन प्रबंधक), यहां तक कि प्रत्येक नोड के भार को ध्यान में रखते हुए कंटेनरों को वितरित करने की क्षमता के साथ।
अन्य परिवर्तनों में से जो बाहर खड़े हैं इस नए संस्करण के:
- ABFS फाइल सिस्टम में स्वचालित ट्यूनिंग की समस्याओं का समाधान किया गया है।
- COS ऑब्जेक्ट भंडारण तक पहुँचने के लिए Tencent क्लाउड COS फ़ाइल सिस्टम के लिए मूल समर्थन जोड़ा गया।
- जावा 11 के लिए पूर्ण समर्थन जोड़ा गया था।
- HDFS RBF (राउटर बेस्ड फेडरेशन) के कार्यान्वयन को स्थिर किया। HDFS राउटर में सुरक्षा नियंत्रण जोड़ा गया है।
- खोज यार्न एप्लिकेशन डायरेक्टरी (एक अन्य संसाधन वार्ताकार) जोड़ा गया।
अंत में, यदि आप इसके बारे में अधिक जानना चाहते हैं, तो आप नए संस्करण का विवरण देख सकते हैं मूल पोस्ट।
उन लोगों के लिए जो नए संस्करण को प्राप्त करने में सक्षम हैं, वे तैयार बायनेरिज़ को डाउनलोड कर सकते हैं निम्नलिखित लिंक में