यहां बेवकूफ सवाल के लिए खेद है, लेकिन मैं स्पार्क कनेक्टर के कॉन्फ़िगरेशन को बदलने की कोशिश कर रहा हूं, विशेष रूप से मोंगो स्पार्क कनेक्टर (कनेक्टर को हमारे प्रोड सर्वर से हमारे सेकेंडरी में बदलने की आवश्यकता है)। मैं उन परिवर्तनों को करने के लिए SparkConf तक कैसे पहुँच सकता हूँ? मैं डेटाब्रिक्स और पायथन का उपयोग कर रहा हूं, v2.1

मैं देख रहा हूँ https://docs.mongodb.com/spark-connector/ मास्टर/कॉन्फ़िगरेशन/ लेकिन मैं उलझन में हूँ कि मैं इसे कहाँ टाइप करूँ? स्थानीय रूप से? एक नोटबुक में? कमांड लाइन में? मैंने उनको आजमाया है और मुझे कोई सफलता नहीं मिली है। अगर किसी के पास कदम से कदम टूटने का व्यावहारिक कदम है, तो यह आश्चर्यजनक होगा।

1
Ashley O 24 अगस्त 2017, 17:10

1 उत्तर

सबसे बढ़िया उत्तर

यदि आप डेटाब्रिक्स डैशबोर्ड का उपयोग करके कॉन्फ़िगरेशन प्रदान करना चाहते हैं:

  • अपने डेटाब्रिक्स डैशबोर्ड पर जाएं।
  • क्लस्टर पैनल खोलें।

    यहां छवि विवरण दर्ज करें

  • क्लस्टर बनाएं पर क्लिक करें।

    यहां छवि विवरण दर्ज करें

  • स्पार्क टैब खोलें और वांछित विकल्प निर्दिष्ट करें:

    यहां छवि विवरण दर्ज करें

  • आपको कॉन्फ़िगरेशन फ़ाइलों के समान प्रारूप का उपयोग करना चाहिए, जिसमें उपसर्ग भी शामिल है:

    spark.mongodb.input.uri  mongodb://host:port/ 
    

संदर्भ:

2
zero323 24 अगस्त 2017, 17:40