जावा: स्प्रिंग और लॉगबैक या लॉग 4 जे 2 का उपयोग करके सिंगल-लाइन लॉग में मल्टी-लाइन लॉग को ध्वस्त करना

Logback और Log4j2 सबसे प्रसिद्ध JAVA लॉगिंग फ्रेमवर्क में से कुछ हैं। लॉगबैक फ्रेमवर्क का उपयोग केवल SLF4J लाइब्रेरी के संयोजन में किया जाता है, जो इवेंट लॉगिंग सिस्टम के लिए एक इंटरफ़ेस है। Log4j2, Log4 लकड़हारा का दूसरा, बेहतर संस्करण है, एक लॉगिंग लाइब्रेरी जिसमें API और कार्यान्वयन अलग हैं, जो आपको किसी अन्य लकड़हारे के कार्यान्वयन के साथ Log4j 2 API का उपयोग करने की अनुमति देता है।

स्प्रिंग म्यूजिक स्प्रिंग फ्रेमवर्क और स्प्रिंग बूट के साथ संयोजन में क्लाउड फाउंड्री पर्यावरण डेटाबेस सेवा का उपयोग करने के लिए एक आवेदन पत्र है। इसे कई अलग-अलग रिपॉजिटरी में से एक में एक ही डोमेन ऑब्जेक्ट्स को स्टोर करने के लिए बनाया गया था - ऑब्जेक्ट-रिलेशनल, डॉक्यूमेंट-ओरिएंटेड या वितरित (की-वैल्यू स्टोर)।



स्प्रिंग / स्प्रिंग बूट के साथ उपयोग किए जाने वाले दो सबसे आम लॉगर लॉगबैक और लॉग 4 जे 2 हैं। कुछ समय पहले तक, डेवलपर को लॉग के प्रारूप और लॉगिंग के लिए स्वयं उपयोग की जाने वाली फ़ाइलों के बारे में अधिक स्वतंत्रता थी। हालांकि, कंटेनर कार्यान्वयन और स्केलिंग की आधुनिक दुनिया में, लॉगिंग आमतौर पर उद्यम समाधान प्रदान करता है जिसे एक निश्चित स्तर के मानकीकरण की आवश्यकता होती है।

सबसे बड़ी समस्याओं में से एक यह है कि जावा अपवाद आमतौर पर लॉग में बड़ी बहु-पंक्ति स्टैक ट्रेसिंग के परिणामस्वरूप होता है। इस वजह से, एक एकल लॉग ईवेंट के बजाय एक अपवाद या त्रुटि संदेश का संकेत मिलता है, आपको 100 से अधिक विभिन्न लॉग मिलते हैं, स्टैक ट्रेस की प्रत्येक पंक्ति के लिए, अन्य सेवाओं या सेवा इंस्टेंसेस से अन्य लॉग ईवेंट के साथ interspersed।

यह आलेख वर्णन करता है कि लॉगबैक लॉगर और Log4j2 दोनों के लिए एक ही पंक्ति में अपवादों को हटाने के लिए स्प्रिंग बूट एप्लिकेशन को कैसे कॉन्फ़िगर किया जाए। यह हमें अपवाद लॉगिंग और स्टैक ट्रेसिंग को एक ईवेंट लॉग के रूप में विचार करने की अनुमति देता है।


जावा में त्रुटि और अपवाद कक्षाएं


जावेद की जाँच की और अनियंत्रित अनियंत्रित अपवाद अपवाद

स्प्रिंग म्यूजिक ऐप

इस आलेख में, कस्टम लॉगिंग के लिए, स्प्रिंग-म्यूज़िक एप्लिकेशन के कस्टम संस्करण का उपयोग किया जाता है, जो लॉगबैक और लॉग 4 जे 2 लॉगर्स के संचालन के लिए आवश्यक है। पहले आपको यह सुनिश्चित करने की आवश्यकता है कि हम इसे स्रोत से फिर से बना सकते हैं। प्रोजेक्ट के लिए Java8 की आवश्यकता है, इसलिए पहला कदम है कि आपके Ubuntu होस्ट पर Java8 स्थापित किया जाए।



तब हम प्रोजेक्ट के सोर्स कोड को जीथब के साथ लेते हैं और ग्रैड बिल्ड सिस्टम की अंतर्निहित लिपियों का उपयोग करके असेंबली बनाते हैं:

लॉगबैक का उपयोग करके बहु-पंक्ति अपवादों को संकुचित करें

चलो चलते हैं और मानक ग्रेड कमांड का उपयोग करते हुए लॉगबैक लकड़हारा के कार्यान्वयन के साथ जार परियोजना का जार संग्रह बनाते हैं:



फ़ाइल "बिल्ड / लिबास / स्प्रिंग-म्यूज़िक। कर्जर" स्व-निष्पादित है और इसमें एक बिल्ट-इन टॉम्कट शामिल है जो स्थानीयहोस्ट के लिए बाध्य है: 8080। जार फ़ाइल को कमांड का उपयोग करके कहा जाता है:



कॉलिंग http: // localhost: 8080 ब्राउज़र में आपको एल्बमों की सूची वाला एक पेज दिखाई देगा, और इस तरह दिखने वाली लॉग लाइन कंसोल में प्रदर्शित होगी:



यह लॉग लाइन सिंटैक्स कस्टम टेम्पलेट का उपयोग करके " src / main / resource / logback-spring.xml " में परिभाषित किया गया है:



चर $ {...} को application.properties और सिस्टम गुणों से निकाला जाता है, जिसे http: // localhost: 8080 / env पर पृष्ठ पर देखा जा सकता है। हालाँकि, हमें जिस कोड की आवश्यकता है, वह संदेश (% m) के तुरंत बाद स्थित है।



शब्द 'MULTIEXCEPTION' का कोई विशेष अर्थ नहीं है, यह सिर्फ एक अद्वितीय स्ट्रिंग मार्कर है जो हमें यह पता लगाने की अनुमति देता है कि संदेश कहां समाप्त होता है (% m) और अपवाद शुरू होता है। आप चाहें तो इस मार्कर को छोड़ सकते हैं।

इसके अलावा, केवल एक% xException प्लेसहोल्डर सम्मिलित करने के बजाय, जो newline वर्णों के साथ एक बड़ा स्टैक ट्रेस फेंक देगा, हम मान को% फ़ंक्शन का उपयोग करके कनवर्ट करते हैं और सभी न्यूलाइन वर्णों को "\ u2028" के साथ प्रतिस्थापित करते हैं, जो एक यूनिक स्ट्रिंग स्ट्रिंग सीमांकक दृश्य है ।

स्टैक ट्रेस से वर्णों को हटाने का अर्थ है कि अब स्टैक ट्रेस अब सिंगल-लाइन रूप में भेजा जाएगा। इसे साबित करने के लिए, http: // localhost: 8080 / त्रुटियों / फेंक पर जाएं , जहां एक त्रुटि नियंत्रक है जो जानबूझकर एक NullPointerException को निम्न कोड के साथ फेंकता है:



यह कंसोल में लॉग लाइन बनाता है, जो नीचे दिखाया गया है:



यह यहाँ देखा जा सकता है कि "u2028" अभिव्यक्ति अलग हो जाती है जो स्टैक ट्रेस में एक पंक्ति फ़ीड हुआ करती थी। अब अपवाद संदेश और स्टैक ट्रेस को एक इकाई के रूप में भेजा जाएगा।

Log4j2 का उपयोग करते हुए मल्टीलाइन अपवादों को संकुचित करें

डिफ़ॉल्ट बिल्ड स्क्रिप्ट को ओवरराइड करने और इस प्रोजेक्ट के बैकअप कार्यान्वयन के रूप में Log4j2 का उपयोग करने के लिए, आपको "build-log4j2.gradle" फ़ाइल का उपयोग करने की आवश्यकता है।



फ़ाइल "बिल्ड / लिबास / स्प्रिंग-म्यूज़िक। कर्जर" स्व-निष्पादित है और बिल्ट-इन टॉमकैट का उपयोग करता है, जो लोकलहोस्ट के लिए बाध्य है: 8080। पिछले उदाहरण की तरह, जार फ़ाइल को कमांड का उपयोग करके कहा जाता है:



कॉलिंग http: // localhost: 8080 एक ब्राउज़र का उपयोग करके एक पेज प्रदर्शित करेगा जिसमें लॉग लाइन आउटपुट वाले एल्बम की सूची कंसोल के साथ होती है जो इस तरह दिखता है:



यह लॉग लाइन सिंटैक्स कस्टम टेम्पलेट का उपयोग करके " src / main / Resources / log4j2.xml " में परिभाषित किया गया है:



चर $ {...} को application.properties और सिस्टम गुणों से निकाला जाता है, जिसे http: // localhost: 8080 / env पर पृष्ठ पर देखा जा सकता है। हालाँकि, हमें जिस कोड की आवश्यकता है, वह संदेश (% m) के तुरंत बाद स्थित है।



'MULTIEXCEPTION' शब्द का कोई विशेष अर्थ नहीं है, यह हमारी पसंद का एक अनूठा लाइन मार्कर है, जो आपको यह पता लगाने की अनुमति देता है कि संदेश कहां समाप्त होता है (% m) और अपवाद शुरू होता है। आप चाहें तो इसे छोड़ सकते हैं।

लेकिन उसके बाद, केवल एक% xException प्लेसहोल्डर डालने के बजाय, जो newline वर्णों के साथ एक बड़ा स्टैक ट्रेस फेंक देगा, हम मान को% प्रतिस्थापित फ़ंक्शन के साथ परिवर्तित करते हैं, जो सभी न्यूलाइन वर्णों को "\ u2028" अभिव्यक्ति के साथ बदल देता है, जो कि एक सीमांकक है यूनिकोड के तार ।

स्टैक ट्रेस से वर्णों को हटाने का अर्थ है कि अब स्टैक ट्रेस अब एक ही पंक्ति के रूप में भेजा जाएगा। यह साबित करने के लिए, http: // localhost: 8080 / त्रुटियों / फेंक पर जाएं , जहां एक त्रुटि नियंत्रक है जो जानबूझकर एक NullPointerException को निम्न कोड के साथ फेंकता है:



यह कंसोल में लॉग लाइन बनाता है, जो नीचे दिखाया गया है:



जैसा कि आप देख सकते हैं, यहां "u2028" अभिव्यक्ति अलग हो जाती है जो स्टैक ट्रेस में एक लाइन फीड हुआ करती थी। अब अपवाद संदेश और स्टैक ट्रेस को एक इकाई के रूप में भेजा जाएगा।

निष्कर्ष

जावा स्टैक के मल्टी-लाइन ट्रेस को एक लाइन में समेटने की क्षमता का मतलब है कि इस तकनीक को एकल केंद्रीकृत लॉगिंग समाधान माना जा सकता है।
सहसंबंधी पहचानकर्ता, बड़े स्टैक आकार, उच्च प्रोसेसर उपयोग, और स्मार्ट पार्सिंग का उपयोग करके गंतव्य पक्ष पर स्टैक ट्रेस को पुनर्स्थापित करने पर कम्प्यूटेशनल और मानव संसाधनों को बर्बाद करने का कोई कारण नहीं है अगर यह स्रोत पर इस तह को प्रदर्शन करने के लिए बहुत अधिक कुशल है।

इस मामले में, यूनिकोड वर्ण को हमेशा लॉग को एकत्रित करने के लिए प्रतिस्थापित किया जा सकता है (उदाहरण के लिए, लॉगस्टैश लॉग को इकट्ठा करने, फ़िल्टर करने और सामान्य करने के लिए पाइप लाइन की तरफ) इसके मूल प्रारूप में संदेश को पुनर्स्थापित करने के लिए।

संदर्भ सामग्री

• https://docs.cloudfoundry.org/loggregator/ RGBecture.html#metron (CF लॉगिंग आर्किटेक्चर)
  docs.pivotal.io/pivotalcf/2-0/devguide/deploy-apps/streaming-logs.html#format (स्ट्रीम लॉग के प्रकार)
• https://docs.pivotal.io/tiledev/2-0/nozzle.html#examples (CF घटकों के लिए लॉग प्रारूप = <$ {PRI}> $ {VERSION} $ {TIMESTAMP} $ {HOST_IP} $ {APP_NAME} $ {PROD_ID} $ {MSG_ID} $ {SD-ELEMENT-inst}} $ {MESSAGE}
• http://grokconstructor.appspot.com/do/construction (ग्रोक टेम्पलेट का ऑनलाइन संस्करण)
• https://github.com/cloudfoundry/dropsonde-protocol (संरचित डेटा रियाल्टार के लिए क्लाउड फाउंड्री ड्रॉप्सॉन्ड प्रोटोकॉल)
• https://logback.qos.ch/manual/layouts.html (एक स्ट्रिंग के लिए एक आने वाले संदेश को परिवर्तित करने के लिए घटकों के प्रारूप)
• https://www.elastic.co/guide/en/logstash/current/plugins-codecs-protobuf.html (logstash protobuf input)
• https://github.com/cloudfoundry-community/firehose-to-syslog (क्लाउड फाउंड्री से syslog पर फ़ायरहॉश ईवेंट भेजना)
• http://schd.ws/hosted_files/cfsummit2016/f7/MonitoringCloudFoundry-LearningAboutTheFirehose.pdf (UDP और TCP CF लॉग सिस्टम के कुछ हिस्सों का प्रदर्शन)
• https://github.com/cloudfoundry-community/logsearch-for-cloudfoundry (ELK के लिए शेष राशि)
• https://discuss.pivotal.io/hc/en-us/articles/223207207-Why-Loggregator-may-lose-logs (संदेश / सेकंड के लिए नुकसान का पूर्वानुमान)
• http://scottfrederick.cfapps.io/blog/2014/02/20/cloud-foundry-and-logstash (भागों में syslog 5424 घटना को कैसे विभाजित करें)
• https://logz.io/blog/cloud-foundry-elk-stack/ (5424 syslog में जुदाई, एक अंतर्निहित सेवा, जैसे किबाना डेटा की कल्पना और विश्लेषण के लिए एक मंच)
• https://docs.cloudfoundry.org/loggregator/cli-plugin.html (सीएफआई प्लग-इन दृश्यहोस्ट देखने के लिए)
• https://github.com/cloudfoundry/loggregator-release/blob/develop/docs/java-multi-line-work-around.md (मल्टी-लाइन अपवाद के लिए लॉगबैक बायपास)
• https://stackoverflow.com/questions/23096129/make-logback-include-the-t-between-date-and-time-in-its-date-format-for-str (logback date and time format)
• http://cloud.rohitkelapure.com/2016/06/multi-line-java-stack-traces-out-of.html (तह अपवादों के लिए लॉगबैक स्ट्रिंग प्रारूप)
• https://discuss.elastic.co/t/match-and-replace-unicode-characters/56656 (म्यूटेट काम नहीं करने पर मामलों में यूनिकोड को बदलने के लिए रूबी का उपयोग करने का विचार)
• https://www.diycode.cc/projects/cloudfoundry/loggregator (लॉगिंग और बॉस प्रकट)
• https://www.elastic.co/guide/en/logstash/5.0/breaking-changes.html (महत्वपूर्ण परिवर्तन event.get (रूबी के लिए))
• !!!
• https://springframework.guru/use-log4j-2-spring-boot/ (स्प्रिंग बूट में log4j2 का उपयोग करके)
• https://www.quickprogrammingtips.com/spring-boot/use-log4j2-with-spring-boot.html (लॉग 4j2 और स्प्रिंग बूट साझा करते हुए)
• https://log.apache.org/log4j/2.x/manual/layouts.html (log4j2 टेम्प्लेट)
• http://www.codepreference.com/2016/04/configurable-thread-context-tags-log4j2.html (लॉगिंग स्ट्रीमिंग के लिए संदर्भ चर)
• https://docs.spring.io/spring-boot/docs/current/reference/html/boot-features-external-config.html (बाहरी स्प्रिंग बूट कॉन्फ़िगरेशन सेटिंग्स)
• http://log.apache.org/log4j/2.x/manual/configuration.html#PropertySubsteration (log4j2 गुण प्रतिस्थापित)

विज्ञापन का एक सा :)

हमारे साथ बने रहने के लिए धन्यवाद। क्या आप हमारे लेख पसंद करते हैं? अधिक दिलचस्प सामग्री देखना चाहते हैं? एक ऑर्डर देकर या $ 4.99 से डेवलपर्स के लिए अपने दोस्तों के क्लाउड-आधारित VPS की अनुशंसा करके हमें समर्थन दें, आपके द्वारा आविष्कार किया गया एंट्री-लेवल सर्वर का एक अनूठा एनालॉग: VPS (KVM) E5-2697 3 (6 करोड़) 10GB DDR4 480GB SSD 1Gbps के बारे में पूरी सच्चाई $ 19 या सर्वर को कैसे विभाजित करें? (विकल्प RAID1 और RAID10 के साथ उपलब्ध हैं, 24 कोर तक और 40GB DDR4 तक)।

डेल R730xd एम्स्टर्डम में इक्विनिक्स टीयर IV डेटा सेंटर में 2 गुना सस्ता? केवल हमारे पास 2 x Intel TetraDeca-Core Xeon 2x E5-2697v3 2.6GHz 14C 64GB DDR4 4x960GB SSD 1Gbps 100 TV नीदरलैंड के 199 डॉलर में से है! डेल R420 - 2x E5-2430 2.2Ghz 6C 128GB DDR3 2x960GB SSD 1Gbps 100TB - $ 99 से! इन्फ्रास्ट्रक्चर Bldg का निर्माण कैसे करें के बारे में पढ़ें । एक पैसा के लिए 9,000 यूरो की लागत डेल R730xd E5-2650 v4 सर्वर का उपयोग कर वर्ग?