दीड वर्षाच्या विकासानंतर, अपाचे सॉफ्टवेअर फाऊंडेशनने जाहीर केले आहे ची नवीन आवृत्ती लाँच अपाचे हडूप 3.3.0. XNUMX..०, आवृत्ती ज्यामध्ये एआरएम प्लॅटफॉर्मवर सुधारणा जोडल्या गेल्या, शेड्यूलिंग कंटेनर लाँच आणि इतर गोष्टींसाठी समर्थन.
अपाचे हॅडूप एक मुक्त व्यासपीठ म्हणून स्वतःचे स्थान आयोजित करण्यासाठी वापरून मोठ्या प्रमाणात डेटाची वितरित प्रक्रिया नकाशा / प्रतिमान कमी करा, ज्यामध्ये कार्य बर्‍याच लहान लहान भागांमध्ये विभागले गेले आहे, त्यातील प्रत्येक स्वतंत्र क्लस्टर नोडवर चालवू शकतो.
हडूप-आधारित संचयन हे हजारो नोड्स विस्तृत करू शकते आणि त्यात एक्झाबाइट डेटा असू शकतो.
अपाचे हडोप बद्दल
हडोप हडूप वितरित फाइल सिस्टमच्या अंमलबजावणीचा समावेश आहे (एचडीएफएस), जो आपोआप डेटा रिडंडंसी प्रदान करते आणि मॅपरेड्यूस अनुप्रयोगांसाठी अनुकूलित आहे.
एक महत्त्वाची कार्यक्षमता अशी आहे की प्रभावी जॉब शेड्यूलिंगसाठी प्रत्येक फाईल सिस्टमला त्याचे स्थान माहित असणे आवश्यक आहे आणि रॅकचे नाव (अधिक तंतोतंत स्विच चे) जेथे कामगार नोड आहे ते माहित असणे आवश्यक आहे.
हाडूप applicationsप्लिकेशन्स या माहितीचा वापर डेटा असलेल्या नोडवर कार्य करण्यासाठी करतात आणि त्याच रॅक / स्विचवर अयशस्वी करतात, त्यामुळे नेटवर्क रहदारी कमी होते.
डेटामध्ये प्रवेश सुलभ करण्यासाठी हडूप स्टोरेजमध्ये, एचबेस डेटाबेस आणि एसक्यूएल सारखी डुक्कर भाषा विकसित केली गेली आहे, जो मॅपरेड्यूससाठी एस क्यू एल प्रकार आहे, ज्याचे प्रश्न विविध हॅडॉप प्लॅटफॉर्मद्वारे समांतर आणि प्रक्रिया केले जाऊ शकतात.
प्रकल्पाचे मूल्यांकन संपूर्णपणे स्थिर आणि औद्योगिक कार्यासाठी तयार आहे. गूडो बिगटेबल / जीएफएस / मॅपड्रिड्यूस प्लॅटफॉर्मला समान क्षमता पुरविणार्‍या मोठ्या औद्योगिक प्रकल्पांमध्ये हडूपचा सक्रियपणे वापर केला जातो, तर Google अधिकृतपणे हडूप आणि इतर अपाचे प्रकल्पांना मॅप्रिड्यूस पद्धतीशी संबंधित पेटंट-आच्छादित तंत्रज्ञान वापरण्यास पात्र आहेत.
हदूप अपाचे रेपॉजिटरीमध्ये प्रथम बदल घडवून आणलेल्या बदलांच्या संख्येच्या आणि पाचव्या क्रमांकाचा सर्वात मोठा कोड बेस (अंदाजे 4 दशलक्ष कोडच्या कोड) च्या बाबतीत आहे.
अपाचे हॅडॉप 3.3 मध्ये नवीन काय आहे?
हडोपची ही नवीन आवृत्ती प्रथम आवृत्ती म्हणून स्थित आहे el एआरएम-आधारित प्लॅटफॉर्मवर समर्थन, ज्यांना या व्यासपीठाची अंमलबजावणी करण्यास स्वारस्य आहे त्यांना आधीपासूनच उपलब्ध एआरएमची बायनरी शोधण्यात सक्षम होईल.
या नवीन आवृत्तीमध्ये सादर केलेला आणखी एक मुख्य बदल आहे प्रोटोबुफ स्वरूपनाच्या नवीन आवृत्तीची अंमलबजावणी (प्रोटोकॉल बफर) स्ट्रक्चर्ड डेटा सिरीलायझ करण्यासाठी वापरले आवृत्ती 3.7.1 मध्ये सुधारित केले आहे प्रोटोबुफ -२. 2.5.0.० शाखेच्या जीवनचक्र समाप्त झाल्यामुळे.
त्या व्यतिरिक्त, देखील एस 3 ए कनेक्टरची क्षमता यापूर्वीच वाढविली गेली आहे आता त्याच्याकडे आहे टोकन वापरून प्रमाणीकरणासाठी समर्थन समाविष्ट केले, 404 कोडसह प्रतिसाद कॅशिंगसाठी सुधारित समर्थन, उच्च एस 3 गार्ड कार्यक्षमता आणि सुधारित ऑपरेशनल विश्वसनीयता.
तसेच डीएनएस निराकरण सेवा जोडली क्लायंटला DNS द्वारे होस्ट नावांद्वारे सर्व्हर निश्चित करण्यासाठी, आपल्याला कॉन्फिगरेशनमधील सर्व होस्टच्या सूचीसह वितरित करण्याची परवानगी दिली जाईल.
तसेच एका केंद्रीकृत संसाधन व्यवस्थापकाद्वारे लाँच शेड्यूल करण्यासाठी समर्थन (रिसोर्समेनेजर), प्रत्येक नोडचे भार विचारात घेऊन कंटेनर वितरित करण्याची क्षमता देखील.
इतर बदल की या नवीन आवृत्तीचे:
- स्वयंचलित ट्यूनिंगची समस्या एबीएफएस फाइल सिस्टममध्ये निराकरण झाली आहे.
- सीओएस ऑब्जेक्ट स्टोरेजमध्ये प्रवेश करण्यासाठी टेंन्टेंट क्लाऊड सीओएस फाइल सिस्टमसाठी मूळ समर्थन जोडला.
- जावा 11 साठी पूर्ण समर्थन जोडले गेले.
- एचडीएफएस आरबीएफ (राउटर बेस्ड फेडरेशन) अंमलबजावणी स्थिर केली. सुरक्षा नियंत्रणे एचडीएफएस राउटरमध्ये जोडली गेली आहेत.
- शोध यार्न अनुप्रयोग निर्देशिका (आणखी एक संसाधन वार्तालाप) जोडली.
शेवटी, आपल्याला त्याबद्दल अधिक जाणून घेऊ इच्छित असल्यास आपण नवीन आवृत्तीचे तपशील येथे तपासू शकता मूळ पोस्ट
ज्यांना नवीन आवृत्ती प्राप्त करण्यात स्वारस्य आहे त्यांच्यासाठी ते तयार बायनरी डाउनलोड करू शकतात पुढील लिंकवर