किन परिस्थितियों के कारण बड़े डेटा पारिस्थितिकी तंत्र का उदय हुआ?

प्रश्न:

किन परिस्थितियों के कारण बड़े डेटा पारिस्थितिकी तंत्र का उदय हुआ?

ऐसे कई कारक हैं जो आज के बड़े डेटा पारिस्थितिकी तंत्र के उद्भव में योगदान करते हैं, लेकिन एक आम सहमति है कि बड़ा डेटा हार्डवेयर और सॉफ़्टवेयर डिज़ाइनों की एक श्रृंखला के कारण आया है, जो केवल बड़े डेटा को मौजूद होने की अनुमति देता है।

बड़े डेटा की एक पारंपरिक परिभाषा इस प्रकार है: डेटा सेट जो पर्याप्त रूप से बड़े और जटिल हैं कि वे आसान पुनरावृत्ति प्रबंधन, या प्रबंधन को हाथ से परिभाषित करते हैं। बिग डेटा सेट को अक्सर डेटा सेट के रूप में पहचाना जाता है जो एक साधारण डेटाबेस नेटवर्क में फिट नहीं हो सकता है, क्योंकि उनके विश्लेषण के लिए डेटा को संभालने वाले सर्वर के हिस्से पर बहुत अधिक काम करने की आवश्यकता होती है।

इसे ध्यान में रखते हुए, बड़े डेटा का एक बड़ा हिस्सा वह विचार है जिसे हम मूर के नियम के रूप में जानते हैं, या हर दो साल में एक सर्किट पर ट्रांजिस्टर के दोहरीकरण, कभी छोटे हार्डवेयर और डेटा स्टोरेज डिवाइस (साथ ही अधिक शक्तिशाली माइक्रोप्रोसेसर) बनाते हैं। । मूर के कानून के साथ संयोजन के रूप में, और शायद इसकी वजह से, सुलभ सॉफ्टवेयर सिस्टम की कंप्यूटिंग क्षमता उस बिंदु तक बढ़ती रही, जहां व्यक्तिगत कंप्यूटर भी बड़ी मात्रा में डेटा को संभाल सकते थे, और व्यापार और मोहरा सिस्टम डेटा आकारों को संभालने में सक्षम होने लगे। केवल कई साल पहले समझ से बाहर। व्यक्तिगत सिस्टम किलोबाइट्स से मेगाबाइट्स और फिर गीगाबाइट्स में चले गए, उपभोक्ताओं के लिए पारदर्शी प्रक्रिया में। मोहरा प्रणाली गीगाबाइट्स से टेराबाइट्स और पेटाबाइट्स में स्थानांतरित हो गई, और ज़ेटाबाइट्स जैसे परिमाण के आदेशों पर, उन तरीकों से जो औसत नागरिक के लिए बहुत कम पारदर्शी थे।

बड़े डेटा को समायोजित करने वाला एक और अग्रिम तरीका है कि हैंडलर संसाधित डेटा सेट के तरीकों में परिवर्तन था। एक पारंपरिक संबंधपरक डेटाबेस डिज़ाइन के माध्यम से रैखिक प्रसंस्करण के बजाय, हैंडलर ने डेटा प्रक्रियाओं में बाधाओं को खत्म करने के लिए अपाचे हडॉप और संबंधित हार्डवेयर प्रबंधन टुकड़ों जैसे उपकरणों का उपयोग करना शुरू कर दिया।

परिणाम बड़ी डेटा दुनिया है जिसमें हम रहते हैं, जहां बड़े पैमाने पर डेटा सेट संग्रहीत किए जाते हैं और डेटा केंद्रों में बनाए रखा जाता है, और उपयोग की एक विस्तृत श्रृंखला के लिए प्रौद्योगिकियों की एक विस्तृत श्रृंखला तक तेजी से पहुँचा जा सकता है। कॉमर्स से लेकर इकोलॉजी तक, पब्लिक प्लानिंग से लेकर मेडिसिन तक, बड़ा डेटा सुलभ हो रहा है। इस बीच, सरकारी एजेंसियां ​​और अन्य बड़े संगठन अभी भी बड़े डेटा आकारों की सीमाओं को आगे बढ़ा रहे हैं और अधिक उन्नत समाधानों को लागू कर रहे हैं।