मैं 1 MapReduce TaskTracker के साथ 10 नोड्स के साथ सीडीएच 5 क्लाउडेरा के साथ अधिकतम नेटवर्क प्रदर्शन प्राप्त करने की कोशिश कर रहा हूं, लेकिन ऐसा प्रतीत नहीं हो सकता यातायात की जरूरत है मैं यातायात का उत्पादन मेरे पास 40 जी नोट कार्ड हैं और वर्तमान में केवल 10 जी के साथ सबसे अधिक मिलना वास्तव में कम है।
1 मानचित्ररडस टास्कट्रैकर का उपयोग करते समय मैं बेहतर प्रदर्शन और नेटवर्क थ्रूपुट कैसे बना सकता हूं?
रनिंग - 10 नोड्स रेडहाट 6.6 चालू एनआईसी चालक सीडीएच 5 कर्नेल: 3.18.1
मैंने 9 मैप रेड्यूस टास्कट्रैकर नोड्स को डिमशन किया है, लेकिन अभी भी अच्छे परिणाम नहीं मिल रहा है।
मैंने अंत में यह सोचा था कि नेटवर्क डफीयो टेस्ट के लिए डेटा नोड पर वास्तव में एक कार्य ट्रैकर की आवश्यकता नहीं है, इसलिए मैंने सभी डेटानोड "कार्य ट्रैकर्स" को निष्क्रिय कर दिया और कार्य ट्रैकर को नाम नोड और अब मेरे पास दोनों लिखना / टीएक्स और पढ़ा / आरएक्स यातायात है जो कि मैं नेटवर्क थ्रूपुट डेटा के लिए चाहता था।
No comments:
Post a Comment