हूप क्या है? एक निंदक का सिद्धांत

जो कुछ भी बहुत अच्छा लगता है वह आमतौर पर सच होता है। इस तरह के अपाचे Hadoop के साथ मामला हो सकता है, बहुत ballyhooed ओपन-सोर्स प्रोजेक्ट है जिसके बारे में हर कोई बात करता रहता है। तो क्या, वास्तव में, यह बात है? अच्छा प्रश्न!

विशेषज्ञ संदेह करते हैं

थर्ड नेचर के एनालिस्ट मार्क मैडसेन ने कुछ समय पहले ही इनसाइडलिसिस.कॉम पर पिथे पीस में दीवार पर इसे लगाया था: "व्हाट हैडोप इज। व्हाट हैडोप इज़ नॉट।" जैसा कि कोई है जो वास्तविक दुनिया के समाधानों को डिजाइन करना जानता है, तो वास्तव में उन्हें तैनात करें, उनकी सलाह को नजरअंदाज नहीं किया जाना चाहिए।

लेकिन यहाँ एक गहरी धारा बह रही है, और समय इस आकर्षक वनस्पतियों की जड़ों का पता लगाने के लिए है, यह देखने के लिए कि क्या हम मैक्रो स्तर के अधिक होने पर कुछ परिप्रेक्ष्य हासिल नहीं कर सकते हैं। आखिरकार, विक्रेता यह कहते रहते हैं कि यह एक बड़ी बात है, और बहुत सारे प्रतिभागी हैं।

कमिटर्स को रोजगार दें? (?)

तीन कंपनियां वर्तमान में Hadoop के नवजात बाजार के अधिकांश हिस्से की मालिक हैं: Cloudera, Hortonworks और MapR। हाल ही में, बोल्डर BI ब्रेन ट्रस्ट (#BBBT) के माध्यम से काफी विवादास्पद ब्रीफिंग, हॉर्टनवर्क्स के जिम वॉकर ने यह उत्सुक टिप्पणी की:

"आप तकनीक को आगे नहीं बढ़ा सकते हैं यदि आप कमिटर्स को रोजगार नहीं देते हैं!"

फिर से आना?

क्या यह ध्वनि कुछ सीनेटर पलपटीन स्टार वार्स फिल्म में नहीं कह सकता है?

सेन पॉलिप्टाइन: "कम्यूटर्स को रोजगार दें!"

पास में मिनियन: "लेकिन, लेकिन, सर! बच्चों के बारे में सोचो!"

आम आदमी के लिए बस काम करने की कोशिश करना, कमिटर्स वे लोग हैं जो एक विशेष ओपन-सोर्स प्रोजेक्ट के लिए समर्पित हैं। अपाचे फाउंडेशन के पास सख्त प्रोटोकॉल हैं जिससे उनकी परियोजनाएं आगे बढ़ती हैं, जो अक्सर एक अच्छी बात है।

उस ने कहा, वॉकर की टिप्पणी वारंट परीक्षा। एक इंगित प्रश्न (खेल के मैदान के दिनों को संजोने के जोखिम पर) होगा: यह एक वादा या खतरा है? क्या वह कह रहा है कि होर्टनवर्क्स सिर्फ अपनी गेंद ले सकता है और घर जा सकता है?

सहयोग या प्रतियोगिता?

दिलचस्प यह है कि यदि विरोधाभासी कोण यहाँ है कि कथित तौर पर, Hadoop टीम (लगभग 30 या तो सभी में) के अधिकांश कॉमर्स Hortonworks और Cloudera से हैं - जो प्रतिस्पर्धी हैं। यह प्रतियोगिता का एक बहुत ही उत्सुक मामला है।

तो, सौदा क्या है? यहां एक शिक्षित अनुमान है: सिलिकॉन वैली उद्यम पूंजीपतियों और इंजीनियरों के एक समूह द्वारा कल्पना की गई एक चतुर योजना के लिए हाडोप काफी हद तक अपनी प्रसिद्धि का श्रेय देता है, जो अनिवार्य रूप से ओरेकल के खिलाफ दांव लगाने की कोशिश कर रहे हैं।

सामान्य विचार यह है कि कोड की एक नींव के साथ बाजार को बीजित किया जाए, जो डेवलपर्स के चीर-टैग बेड़े द्वारा बढ़ाया और बढ़ाया जा सकता है, जो डेटाबेस उत्पादों सहित आदर्श रूप से, समय के साथ, डेटा प्रबंधन टूल के सभी तरीके बनाते हैं। कुलपति किसी दिन निवेश और नकदी निकाल सकते हैं। लेकिन खेल में कुछ गंभीर चुनौतियां हैं।

सभी अखंड उद्यमों की तरह, ओरेकल अक्सर कई छोटे खिलाड़ियों के क्रॉसहेयर में खुद को पाता है। और जो अपने दिमाग सुन्न राजस्व का सिर्फ एक टुकड़ा नहीं चाहेगा? पिछली तिमाही में, ओरेकल ने ~ 9 बिलियन डॉलर की बुकिंग की थी। लेकिन बिग रेड को चुनौती देना और उन्हें पीटना दो अलग-अलग वास्तविकताएं हैं।

नि: शुल्क वेबकास्ट: Hadoop क्या है और यह कहाँ जा रहा है? एक चर्चा के लिए एरिक कवानघ, रॉबिन ब्लोर और टेकोपेडिया को शामिल करें कि कैसे हडोप लिनक्स या एसओए से काफी अलग है, और इसका भविष्य काफी हद तक अलिखित क्यों है।

पैकेजिंग समस्याएं

Hadoop के बारे में बात, प्रति se, यह है कि यह किसी भी तरह से एक पैक समाधान नहीं है। बल्कि, यह मॉड्यूल का एक जटिल संग्रह है जो उच्च गुणवत्ता वाले प्रोग्रामर को बहुत विशिष्ट चीजों को करने के लिए बड़े पैमाने पर समानांतर प्रसंस्करण एल्गोरिदम का लाभ उठाने में सक्षम बनाता है। लेकिन कोई फैंसी यूजर इंटरफेस नहीं है, और मैनुअल क्रूर हैं।

इस महत्वपूर्ण बाधा को उस चुनौती में जोड़ें: आपको उन व्यवसायी लोगों की भी आवश्यकता है, जिनके पास कम से कम एक सामान्य समझ है कि यह क्या कर सकता है। उन लोगों को विचारों का संयोजन करने में सक्षम होना चाहिए कि इसका उपयोग कैसे किया जा सकता है, फिर डेवलपर्स से संवाद करें, जिन्हें बाद में अनुप्रयोगों का उत्पादन, परीक्षण, कार्यान्वयन और समर्थन करना होगा।

इस डांस को ऑर्केस्ट्रेट करते हुए कहा जाता है कि क्लूडेरा और हॉर्टनवर्क्स अपना बहुत पैसा कमाते हैं। समस्या यह है, इस पद्धति के माध्यम से बनाए गए अधिकांश समाधान अद्वितीय हैं, और आमतौर पर विश्लेषणात्मक लोगों के विपरीत परिचालन प्रणालियों पर ध्यान केंद्रित करते हैं। अनुवाद? सामान की तरह है कि वास्तव में पैक सॉफ्टवेयर उत्पादों के लिए उधार नहीं है।

पैकेजिंग लाभप्रदता!

जो हमें Oracle में वापस लाता है। लैरी एलिसन और लड़के अपने हाईएंग डेटाबेस टेक, हार्डवेयर, सर्विसेज और (इसके लिए प्रतीक्षा करें) पैकेज्ड सॉफ्टवेयर बनाते हैं। क्लूडेरा ने जाहिरा तौर पर यह पता लगाया, इसलिए उनका ध्यान इम्पाला पर था। लेकिन होर्टनवर्क्स?

उनका मॉडल RedHat की तुलना में अधिक बारीकी से नकल करता दिखाई देता है, जो लोग लिनक्स ऑपरेटिंग सिस्टम के शीर्ष पर एक अरब-डॉलर का व्यवसाय बनाते थे। एंटरप्राइज़ सॉफ्टवेयर उद्योग में एक प्रमुख विक्रेता लिनक्स के लिए नहीं लिखता है, ओएस जिसके द्वारा आईबीएम ने माइक्रोसॉफ्ट को पास कर दिया है। लेकिन Hadoop कोई लिनक्स नहीं है, एक लंबे शॉट से नहीं।

डॉ। जेफ्री मालाफैस्की, अमेरिकी नौसेना के एक पूर्व नैनोटेक्नोलॉजिस्ट, जो अब फासिक सिस्टम और पीएसआईआईसीओआरएस इंस्टीट्यूट के डेटा वैज्ञानिक हैं, इस तरह से हडोप्प मूल्य प्रस्ताव को पूरा करते हैं:

"Hadoop खोज के लिए बहुत अच्छा है, स्टोकेस्टिक परिणामों के लिए बहुत बड़ी प्रवृत्ति विश्लेषण, और संभवतः मेरी पूर्व पत्नी की तरह कुछ बहुत ही सस्ते चतुर समानांतर प्रसंस्करण करते थे: ठोस राज्य और रासायनिक प्रतिक्रियाओं की क्वांटम मैकेनिकल वेव फ़ंक्शन गणना। यह वास्तविक विज्ञान की पुष्टि करता है। सुपर कंप्यूटर पर और कुछ हद तक समानांतर प्रसंस्करण में ले जाया गया, लेकिन यह प्रोग्रामिंग दृष्टिकोण का एक कठिन बदलाव है। युवा, स्मार्ट, ऊर्जावान स्नातक छात्र ऐसा करने वाले होंगे। मुझे संदेह है कि अनुसंधान अनुदान कुछ उच्च-शक्ति वाले कम्प्यूटेशनल के लिए इस दिशा में जाने लगते हैं। अनुप्रयोग।"

आप ध्यान देंगे कि डेटा वेयरहाउसिंग, बिजनेस इंटेलिजेंस, डेटा इंटीग्रेशन या यहां तक ​​कि बड़े डेटा की तरह कुछ भी ध्वनि नहीं करता है। यह सुपरकंप्यूटिंग लगता है। और कुछ दिलचस्प कारणों के लिए, उच्च-प्रदर्शन कंप्यूटिंग और व्यापार खुफिया की दुनिया वास्तव में कभी भी किसी भी सार्थक तरीके से टकराया या संकुचित नहीं हुई है।

हॉर्टनवर्क्स और क्लाउडडे के लिए लंबी सड़क

और यहां हॉर्टोनवर्क्स और संभवतः क्लोदेरा के लिए वास्तव में बुरी खबर है। आईबीएम और एसएपी और ओरेकल और टेराडाटा जैसे बड़े विक्रेताओं ने इसे हल्के ढंग से रखने के लिए, और डायर स्ट्रेट्स को उद्धृत करने के लिए: "उन लोगों को गूंगा नहीं है!" तीन और अधिक साल पहले, उन सभी ने गंभीर हडोप रणनीति बनाई।

इन योजनाओं के लिए केंद्र उन चीजों के प्रकार हैं जिनकी व्यवसाय उपयोगकर्ता अपेक्षा करते हैं: चित्रमय उपयोगकर्ता इंटरफेस, ड्रैग-एंड-ड्रॉप कार्यक्षमता, मॉडलिंग और खोज उपकरण, कार्य प्रवाह, शासन, सुरक्षा; संक्षेप में, सभी बिट्स और टुकड़े जो एंटरप्राइज़ सॉफ़्टवेयर को उपयोग करने योग्य बनाते हैं। और हां, इन बड़े विक्रेताओं के पास बड़े पैमाने पर स्थापित आधार हैं।

यह सुनिश्चित करने के लिए कि, क्लाउडरा और हॉर्टनवर्क्स दोनों ने अच्छा कारोबार किया है, लेकिन हर साल उन प्रमुख खिलाड़ियों का केवल एक छोटा सा हिस्सा होता है। गणित इस बात पर करता है कि चुनौती देने वाले अपने ग्राहकों से कितना शुल्क लेते हैं, उनकी तुलना में उनके ओवरहेड की संभावना कितनी है, और तस्वीर इतनी तेजस्वी नहीं है। दी, कि प्रारंभिक चरण सॉफ्टवेयर चिंताओं के साथ पाठ्यक्रम के लिए बराबर है, लेकिन अभी भी …

Hadoop का भविष्य?

तो, क्या हम अधिग्रहण की क्लासिक लहर को देख सकते हैं, जैसे कि हम वापस आयोज में थे, जब आईबीएम ने कॉग्नोस खरीदा था, ओरेकल को हाइपरियन और एसएपी ने बिजनेसऑब्जेक्ट को नाम दिया था? शायद, लेकिन इस ब्लॉक पर नए बच्चों के पास Hadoop नहीं है; वे सिर्फ इसे उधार लेते हैं। और जैसा कि YARN और Tez के रूप में होनहार है, रिलीज के चक्र भारी पिछलग्गू क्या पैदा करते हैं के पीछे लग रहे हो।

दूसरे दिन, एक उद्योग के अंदरूनी सूत्र ने टिप्पणी की कि अपाचे पर राजनीति एक गंभीर अड़चन हो सकती है। यह बहुत आश्चर्य की बात नहीं है, खासकर जब आप इसमें शामिल डॉलर पर विचार करते हैं - नवप्रवर्तकों के लिए इसे अमीर बनाने के लिए बहुत प्रेरणा है। और क्या किसी ने देखा है कि क्रोम ने फ़ायरफ़ॉक्स को कार्यक्षमता और संचालन में हाल ही में कैसे पार किया है? बंद-स्रोत, कोई भी?

एक बात सुनिश्चित है: यह खेल कुछ दिलचस्प तरीकों से खेलेंगे। हां, स्तनधारियों (पढ़ें: छोटे विक्रेताओं) अक्सर डायनासोर को पछाड़ सकते हैं; लेकिन अभी भी दुनिया भर में मगरमच्छ और मगरमच्छ हैं; और यदि आप एक अनजाने में ठोकर खाते हैं, तो आप केवल यह पता लगा सकते हैं कि वे दांत कितने तेज हो सकते हैं। एक साथ कुछ crocs भी एक हाथी या दो नीचे ले जा सकते हैं।