जावा, स्प्रिंग, कुरेंटो और मीडिया सेवाएं। भाग २

पिछले लेख में, मैंने कुर्तेओ ट्यूटोरियल से हैलोवर्ल्ड एप्लिकेशन के साथ अपने प्रयोग का वर्णन किया। इस लेख में, मैं जावा स्प्रिंग और कुरेंटो मीडिया सर्वर-ए में वेब अनुप्रयोगों की समीक्षा करना जारी रखूंगा।

ट्यूटोरियल में अगले एप्लिकेशन को वेबआरटीसी मैजिक मिरर कहा जाता है। नाम से यह निम्नानुसार है कि दर्पण थोड़ा अलंकृत वास्तविकता को दर्शाता है। इस एप्लिकेशन में, पिछले एक के अलावा, कंप्यूटर विज़न फ़िल्टर FaceOverlay फ़िल्टर का उपयोग किया जाता है। जब कैमरे में एक मानव चेहरे का पता लगाया जाता है, तो कुरेंटो मीडिया सर्वर अपने सिर पर सुपर मारियो कैप "डालता" है। यदि लेंस में कई चेहरे हैं, तो हर कोई टोपी पहने हुए है।

Kurento मीडिया सर्वर लॉन्च करें

sudo service kurento-media-server start 

यदि आपने कुर्तेनो जावा ट्यूटोरियल को पहले ही क्लोन कर लिया है, तो निम्न कमांड को न चलाएं:

 git clone https://github.com/Kurento/kurento-tutorial-java.git 

प्रोजेक्ट डायरेक्टरी पर जाएं

 cd kurento-tutorial-java/kurento-magic-mirror 

हम मावेन टीम द्वारा परियोजना को संकलित करते हैं

 mvn compile exec:java 

या, जैसा कि मेरे मामले में, आइडिया से शुरू करते हैं।

फ़ायरफ़ॉक्स ब्राउज़र में, https: // localhost: 8443 / पर जाएं

खुलने वाली विंडो में, "प्रारंभ" बटन पर क्लिक करें, आपको एक तस्वीर देखनी चाहिए:


इस अनुभव से हम यह निष्कर्ष निकालते हैं: मेरी बिल्ली का चेहरा बिल्कुल इंसान जैसा नहीं दिखता है, इसलिए सुपर मारियो की टोपी उसके लिए नहीं होनी चाहिए।

आइए देखें कि यह उदाहरण कैसे काम करता है।

एप्लिकेशन संरचना पिछले HelloWorld एप्लिकेशन को दोहराती है। तीन सॉफ्टवेयर ब्लॉक एप्लिकेशन में इंटरैक्ट करते हैं: ब्राउज़र साइड पर, जावा स्क्रिप्ट कोड, सर्वर साइड स्प्रिंग-बूट वेब एप्लिकेशन पर जो कि कुरेंटो सर्वर को नियंत्रित करता है। ये प्रोग्राम Json प्रोटोकॉल के आधार पर एक-दूसरे के साथ संदेशों का आदान-प्रदान करता है।



आरेख से पता चलता है कि केएमएस में, WebRtcEndpoint प्रोग्राम ब्लॉक अब रिसेप्शन के लिए मल्टीमीडिया सिग्नल के संचरण को लपेटता है, लेकिन पहले इसे फेसऑवरलेफ़िल्टर से गुजरता है, जो तस्वीर में एक चेहरे की उपस्थिति निर्धारित करता है।

प्रोग्राम ब्लॉक के बीच सिग्नल एक्सचेंज लगभग हैलोवर्ल्ड एप्लिकेशन के समान है।



जब आप "प्रारंभ" बटन पर क्लिक करते हैं तो एप्लिकेशन में मुख्य कार्य किए जाते हैं। MediaPipeline बनाया जाता है, जिसके माध्यम से मीडिया ट्रैफ़िक को प्रसारित किया जाएगा, WebRtcEndpoint और FaceOverlayFilter मीडिया तत्व बनाए जाते हैं, उनके बीच एक कनेक्शन बनाया जाता है।

यहां उन कथनों का सरलीकृत क्रम दिया गया है जो किसी दिए गए एप्लिकेशन के लिए प्रोग्राम ब्लॉक की एक श्रृंखला बनाते हैं।

 MediaPipeline pipeline = kurento.createMediaPipeline(); WebRtcEndpoint webRtcEndpoint = new WebRtcEndpoint.Builder(pipeline).build(); FaceOverlayFilter faceOverlayFilter = new FaceOverlayFilter.Builder(pipeline).build(); webRtcEndpoint.connect(faceOverlayFilter); faceOverlayFilter.connect(webRtcEndpoint); 

RTP रिसीवर नामक कुर्तो ट्यूटोरियल से निम्नलिखित आवेदन पर विचार करें।

यदि प्रारंभ नहीं हुआ है, तो Kurento Media Server प्रारंभ करें

 sudo service kurento-media-server start 

यदि आपने कुर्तेनो जावा ट्यूटोरियल को पहले ही क्लोन कर लिया है, तो निम्न कमांड को न चलाएं:

 git clone https://github.com/Kurento/kurento-tutorial-java.git 

प्रोजेक्ट डायरेक्टरी पर जाएं

 cd kurento-tutorial-java/kurento-rtp-receiver 

हम मावेन टीम द्वारा परियोजना को संकलित करते हैं

 mvn compile exec:java 

या, मेरे मामले में, आइडिया से शुरू करते हैं।

फ़ायरफ़ॉक्स ब्राउज़र में, https: // localhost: 8443 / पर जाएं

खुलने वाली विंडो में, "प्रारंभ" बटन पर क्लिक करें



KMS कनेक्शन जानकारी विंडो में, Gstreamer के लिए कमांड को कॉन्फ़िगर करने के लिए डेटा दिखाई देता है: ऑडियो, वीडियो पोर्ट, आईपी एड्रेस। यह डेटा, साथ ही फ़ाइल का पथ, कमांड में निर्दिष्ट होना चाहिए।

 PEER_A={KMS_AUDIO_PORT} PEER_V={KMS_VIDEO_PORT} PEER_IP={KMS_PUBLIC_IP} \ SELF_PATH="{PATH_TO_VIDEO_FILE}" \ SELF_A=5006 SELF_ASSRC=445566 \ SELF_V=5004 SELF_VSSRC=112233 \ bash -c 'gst-launch-1.0 -e \ rtpbin name=r sdes="application/x-rtp-source-sdes,cname=(string)\"user\@example.com\"" \ filesrc location="$SELF_PATH" ! decodebin name=d \ d. ! queue ! audioconvert ! opusenc \ ! rtpopuspay ! "application/x-rtp,payload=(int)96,clock-rate=(int)48000,ssrc=(uint)$SELF_ASSRC" \ ! r.send_rtp_sink_0 \ d. ! queue ! videoconvert ! x264enc tune=zerolatency \ ! rtph264pay ! "application/x-rtp,payload=(int)103,clock-rate=(int)90000,ssrc=(uint)$SELF_VSSRC" \ ! r.send_rtp_sink_1 \ r.send_rtp_src_0 ! udpsink host=$PEER_IP port=$PEER_A bind-port=$SELF_A \ r.send_rtcp_src_0 ! udpsink host=$PEER_IP port=$((PEER_A+1)) bind-port=$((SELF_A+1)) sync=false async=false \ udpsrc port=$((SELF_A+1)) ! r.recv_rtcp_sink_0 \ r.send_rtp_src_1 ! udpsink host=$PEER_IP port=$PEER_V bind-port=$SELF_V \ r.send_rtcp_src_1 ! udpsink host=$PEER_IP port=$((PEER_V+1)) bind-port=$((SELF_V+1)) sync=false async=false \ udpsrc port=$((SELF_V+1)) ! tee name=t \ t. ! queue ! r.recv_rtcp_sink_1 \ t. ! queue ! fakesink dump=true async=false' 

वैसे, जांचें कि क्या आपने Gstreamer स्थापित किया है

 gst-launch-1.0 —gst-version 

पोर्ट और सामान को तैयार किया, कंसोल में उन्होंने गैस्ट्रमर-एक कमांड लॉन्च किया।

अब, ध्यान लॉटरी खेल रहा है। मुझे नहीं पता कि आपकी फ़ाइल खेली जाएगी या नहीं। क्लिप के मेरे बजाय खराब संग्रह से, * .mpg एक्सटेंशन वाली फाइलें चलने लगीं



यहां पर नतालिया मोगिलेवस्काया की क्लिप बजाई जाती है। एक अलग एक्सटेंशन वाले क्लिप या तो खेलते नहीं हैं, या विकृत ध्वनि के साथ खेलते हैं।

इस अनुभव से हम निष्कर्ष निकालते हैं: सभी योग समान रूप से उपयोगी नहीं हैं।

हम इस एप्लिकेशन के संचालन का विश्लेषण करेंगे। सबसे पहले, मीडिया पाइपलाइन को मीडिया ट्रैफिक, और साथ ही RtpEndpoint और WebRtcEndpoint प्रसारित करने के लिए बनाया गया है, बाद वाला आरटीपी पैकेट के रिसीवर का काम करता है और एक वीडियो क्लिप प्रदर्शित करने के लिए उपयोग किया जाता है।

यहां जावा एप्लिकेशन के इस भाग के लिए कथनों का सरलीकृत क्रम दिया गया है:

 final MediaPipeline pipeline = kurento.createMediaPipeline(); final RtpEndpoint rtpEp = makeRtpEndpoint(pipeline, useSrtp); final WebRtcEndpoint webRtcEp = new WebRtcEndpoint.Builder(pipeline).build(); rtpEp.connect(webRtcEp); 

यह कुर्तेन ट्यूटोरियल के इस भाग की समीक्षा को समाप्त करता है। एक अच्छी प्रोग्रामिंग है!

Kurento
Kurento ट्यूटोरियल
पिछला लेख