विषयसूची:

मुझे स्पार्क लॉग कहां मिल सकते हैं?
मुझे स्पार्क लॉग कहां मिल सकते हैं?

वीडियो: मुझे स्पार्क लॉग कहां मिल सकते हैं?

वीडियो: मुझे स्पार्क लॉग कहां मिल सकते हैं?
वीडियो: Tecno Spark Go 2021 (KE5) Hard Reset ll All Type Pin, Password, Pattern Lock Remove Without PC Free 2024, अप्रैल
Anonim

लॉग निर्देशिका

डिफ़ॉल्ट SPARK_WORKER_LOG_DIR स्थान /var/ है लॉग / स्पार्क / कार्यकर्ता। डिफ़ॉल्ट लॉग शुरू करने के लिए निर्देशिका स्पार्क SQL थ्रिफ्ट सर्वर $HOME/ है स्पार्क -थ्रिफ्ट-सर्वर। स्पार्क खोल और आवेदन लॉग कंसोल के लिए आउटपुट हैं। लॉग कॉन्फ़िगरेशन फ़ाइलें उसी निर्देशिका में स्थित हैं जैसे स्पार्क -env.sh.

इस संबंध में, मैं स्पार्क लॉग कैसे प्राप्त करूं?

स्पार्क विश्लेषण पृष्ठ से नौकरी या आवेदन, आप तक पहुंच सकते हैं लॉग एप्लिकेशन UI के माध्यम से और स्पार्क आवेदन यूआई। पृष्ठ, आप तक पहुंच सकते हैं लॉग के माध्यम से स्पार्क आवेदन यूआई। आप अतिरिक्त भी कर सकते हैं लॉग त्रुटियों और अपवादों की पहचान करने के लिए स्पार्क नौकरी या आवेदन विफलता।

इसी तरह, आप यार्न लॉग की जांच कैसे करते हैं? देखना लॉग फ़ाइल लॉग https://${ पर संसाधन प्रबंधक UI में किसी एप्लिकेशन मास्टर के ब्राउज़र में भी देखा जा सकता है धागा .resourcemanager.webapp.address}/क्लस्टर (https://localhost:8088 सिंगल नोड "क्लस्टर" पर)।

इसी तरह कोई पूछ सकता है, मैं स्पार्क पर निष्पादक लॉग कैसे प्राप्त करूं?

उत्तर

  1. स्पार्क निष्पादक लॉग प्राप्त करने के निर्देश:
  2. अमाबारी के लिए - 1) स्पार्क सर्विस और कॉन्फिग टैब पर जाएं: 2) "उन्नत स्पार्क-लॉग4जे-प्रॉपर्टीज" प्रविष्टि खोजें।
  3. क्लौडेरा के लिए - सेट करें: Spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties।

मैं अपना स्पार्क इतिहास सर्वर यूआरएल कैसे ढूंढूं?

उदा., के लिए इतिहास सर्वर , वे आम तौर पर https://<. पर पहुंच योग्य होंगे सर्वर - यूआरएल >:18080/api/v1, और चल रहे एप्लिकेशन के लिए, https://localhost:4040/api/v1 पर। एपीआई में, किसी एप्लिकेशन को उसकी एप्लिकेशन आईडी, [ऐप-आईडी] द्वारा संदर्भित किया जाता है।

सिफारिश की: