वीडियो: एडब्ल्यूएस MapReduce क्या है?
2024 लेखक: Lynn Donovan | [email protected]. अंतिम बार संशोधित: 2023-12-15 23:47
अमेज़ॅन लोचदार मानचित्र छोटा करना (ईएमआर) एक अमेज़ॅन वेब सेवा है ( एडब्ल्यूएस ) बिग डेटा प्रोसेसिंग और विश्लेषण के लिए उपकरण। Amazon EMR, Amazon Elastic Compute Cloud (EC2) और Amazon Simple Storage Service (S3) पर वर्चुअल सर्वर के Hadoop क्लस्टर में बड़े डेटा को प्रोसेस करता है।
ऐसे में AWS EMR कैसे काम करता है?
सेवा Amazon EC2 उदाहरणों की एक ग्राहक-निर्दिष्ट संख्या शुरू करती है, जिसमें एक मास्टर और कई अन्य नोड शामिल होते हैं। वीरांगना ईएमआर इन उदाहरणों पर Hadoop सॉफ़्टवेयर चलाता है। मास्टर नोड इनपुट डेटा को ब्लॉक में विभाजित करता है, और ब्लॉक के प्रसंस्करण को अन्य नोड्स में वितरित करता है।
ऊपर के अलावा, ec2 और EMR में क्या अंतर है? भिन्न ईएमआर , ईसी2 दास नोड्स को कोर और टास्क नोड्स में वर्गीकृत नहीं करता है। इससे नोड के हटाए जाने/खोने की स्थिति में एचडीएफएस डेटा खोने का खतरा बढ़ जाता है। ईसी2 s3 पर डेटा एक्सेस करने के लिए Apache लाइब्रेरी (s3a) का उपयोग करता है। दूसरी ओर, ईएमआर s3 तक तेजी से पहुंच प्राप्त करने के लिए AWS मालिकाना कोड का उपयोग करता है।
इसके अलावा, क्या एडब्ल्यूएस ईएमआर पूरी तरह से प्रबंधित है?
वीरांगना लोचदार नक्शा कम करें ( ईएमआर ) एक है पूरी तरह से प्रबंधित Hadoop और Spark प्लेटफॉर्म से वीरांगना वेब सेवा ( एडब्ल्यूएस ) साथ में ईएमआर , एडब्ल्यूएस ग्राहक बड़े डेटा वर्कलोड को संसाधित करने के लिए मल्टी-नोड हडूप क्लस्टर को जल्दी से स्पिन कर सकते हैं।
क्या एडब्ल्यूएस हडूप का उपयोग करता है?
वीरांगना वेब सेवाएं उपयोग ओपन-सोर्स अपाचे हडूप डेटा-गहन कार्यों को चलाने के लिए बड़ी मात्रा में कंप्यूटिंग शक्ति तक पहुंच को आसान बनाने के लिए वितरित कंप्यूटिंग तकनीक। हडूप , Google के MapReduce का ओपन-सोर्स संस्करण, पहले से ही Yahoo और Facebook जैसी कंपनियों द्वारा उपयोग किया जा रहा है।
सिफारिश की:
ईसीयू एडब्ल्यूएस क्या है?
Amazon EC2 EC2 प्रत्येक उदाहरण आकार के लिए CPU संसाधनों का वर्णन करने के लिए EC2 कंप्यूट यूनिट (ECU) शब्द का उपयोग करता है, जहां एक ECU 1.0-1.2 GHz 2007 Opteron या 2007 Xeon प्रोसेसर के बराबर CPU क्षमता प्रदान करता है।
MapReduce नौकरी चलाने के लिए उपयोगकर्ता को निर्दिष्ट करने के लिए मुख्य कॉन्फ़िगरेशन पैरामीटर क्या हैं?
मुख्य कॉन्फ़िगरेशन पैरामीटर जिन्हें उपयोगकर्ताओं को "MapReduce" ढांचे में निर्दिष्ट करने की आवश्यकता होती है: वितरित फ़ाइल सिस्टम में नौकरी के इनपुट स्थान। वितरित फ़ाइल सिस्टम में जॉब का आउटपुट स्थान। डेटा का इनपुट प्रारूप। डेटा का आउटपुट स्वरूप। नक्शा समारोह युक्त वर्ग। कम फ़ंक्शन युक्त वर्ग
कौन सी एडब्ल्यूएस सेवाएं मुफ्त हैं?
Amazon Simple Workflow Service, Amazon DynamoDB, Amazon SimpleDB, Amazon Simple Notification Service, और Amazon Simple Queue Service फ्री टियर मौजूदा और नए AWS दोनों ग्राहकों के लिए अनिश्चित काल के लिए उपलब्ध हैं।
एडब्ल्यूएस आरक्षित उदाहरण कैसे काम करते हैं?
एक आरक्षित उदाहरण एक क्षेत्र के भीतर एक विशेष उपलब्धता क्षेत्र के लिए, एक या तीन साल के लिए संसाधनों और क्षमता का आरक्षण है। ऑन-डिमांड के विपरीत, जब आप आरक्षण खरीदते हैं, तो आप 1- या 3-वर्ष की अवधि के सभी घंटों के लिए भुगतान करने के लिए प्रतिबद्ध होते हैं; बदले में, प्रति घंटा की दर काफी कम हो जाती है
क्या आप विंडोज को एडब्ल्यूएस पर चला सकते हैं?
ग्राहक एक दशक से अधिक समय से AWS पर विंडोज वर्कलोड चला रहे हैं। आप नवीनतम संस्करण, विंडोज सर्वर 2019 सहित कई विंडोज सर्वर संस्करणों में से चयन कर सकते हैं। इसके अलावा, एडब्ल्यूएस सक्रिय निर्देशिका सहित विंडोज अनुप्रयोगों को बनाने और चलाने के लिए आवश्यक सभी चीजों का समर्थन करता है