UDP से JAVA एप्लिकेशन पर Android डिवाइस से स्ट्रीम वीडियो

तो, फिनिश लाइन पर जाएं। हम पहले ही जान चुके हैं कि Android से VLC प्लेयर में वीडियो स्ट्रीम कैसे किया जाता है, अब यह केवल JAVA एप्लिकेशन में वीडियो के साथ विंडो को एकीकृत करने और रोबोट को चलाने के लिए शुरू होता है।



ओपन सोर्स प्रोजेक्ट VLCJ CAPRICA इससे हमें बहुत मदद मिलेगी।

Vlcj प्रोजेक्ट एक जावा फ्रेमवर्क प्रदान करता है जो एक मूल VLC मीडिया प्लेयर के एक उदाहरण को जावा एप्लिकेशन में एम्बेड करने की अनुमति देता है।

लोगों का विचार सरल है, लेकिन सरल (वास्तव में काली मिर्च) है। FFmpeg पुस्तकालयों और अधिक के साथ पीड़ा के बजाय, आपको तुरंत एक विशेषज्ञ को एक सामान्य, कार्यात्मक और पेशेवर वीएलसी मीडिया प्लेयर के मूल को कॉल करना चाहिए। और इसे सीधे JAVA एप्लिकेशन से कॉल करें।

कौन परवाह करता है, हम एक बिल्ली के लिए पूछते हैं।

चूंकि, इस यात्रा में, पर्याप्त नुकसान होते हैं, हम हमेशा की तरह शुरू करेंगे, एक बहुत ही सरल के साथ और उसके बाद ही तुच्छ यात्रा करेंगे।

VLCJ पैकेज स्थापित करें

सबसे पहले, VLC मीडिया प्लेयर के अपने संस्करण की जाँच करें। हमें एक नए संस्करण की आवश्यकता नहीं है, यह कटौती करता है जो udp स्ट्रीम के लिए आवश्यक है। यह पहले से ही एक पिछले पोस्ट में उल्लेख किया गया था। इसलिए, हम छाता के संस्करण 2.2.6 को डाउनलोड करते हैं और उसी समय हमारे जेएवीए पैकेज को ध्यान से देखते हैं। उन्हें थोड़ी गहराई में मेल खाना चाहिए। यदि खिलाड़ी 64-बिट आर्किटेक्चर का उपयोग करता है, तो JDK समान होना चाहिए। और यह बंद नहीं हुआ।

उसके बाद, आप पहले से ही VLCJ लाइब्रेरी पैकेज डाउनलोड कर सकते हैं



कृपया ध्यान दें कि हमें vlcj-3.12.1 वितरण (ज़िप) पैकेज की आवश्यकता है। यह वह खिलाड़ी है जो VLC 2.2.x संस्करण के साथ काम करता है। आप इसे कहीं भी अनज़िप कर सकते हैं, मुख्य बात यह है कि यह स्वयं वीएलसी के फ़ोल्डर में नहीं है, क्योंकि दो फाइलें नाम से मेल खाती हैं। और यदि आप उन्हें फिर से लिखते हैं, तो यह सब पूरी तरह से विफल हो जाएगा।

इसके बाद, हम IntelliJ IDEA IDE में एक प्रोजेक्ट बनाते हैं (यदि आपके पास एक अलग IDE है, तो मैं कुछ भी मदद नहीं कर सकता) और VLCJ पुस्तकालयों के एकीकरण के लिए आवश्यक निर्भरताएं लिख सकता हूं।



हम फ़ाइलों के लिए बस यही करते हैं:

JNA-5.2.0

JNA मंच-5.2.0

vlcj-3.12.1

फिर हम एकमात्र वर्ग बनाते हैं और उसमें अगले छोटे कार्यक्रम लिखते हैं।

import java.awt.*; import java.awt.event.WindowAdapter; import java.awt.event.WindowEvent; import javax.swing.JFrame; import javax.swing.JPanel; import javax.swing.SwingUtilities; import uk.co.caprica.vlcj.component.EmbeddedMediaPlayerComponent; import uk.co.caprica.vlcj.discovery.NativeDiscovery; import uk.co.caprica.vlcj.player.MediaPlayerFactory; import uk.co.caprica.vlcj.player.embedded.EmbeddedMediaPlayer; import uk.co.caprica.vlcj.player.embedded.videosurface.CanvasVideoSurface; public class BasicPlayer { public final JFrame frame; public static String mrl; public static MediaPlayerFactory mpf; public static EmbeddedMediaPlayer MediaPlayer; public static CanvasVideoSurface videoSurface; public static Canvas canvas; public static void main(final String[] args) { new NativeDiscovery().discover(); mrl = "D:\\ttt.mp4"; SwingUtilities.invokeLater(new Runnable() { @Override public void run() { BasicPlayer vp = new BasicPlayer(); vp.start(mrl); } }); } public BasicPlayer() { frame = new JFrame("My First Media Player"); frame.setBounds(200, 100, 540, 340); frame.setDefaultCloseOperation(JFrame.DO_NOTHING_ON_CLOSE); frame.addWindowListener(new WindowAdapter() { @Override public void windowClosing(WindowEvent e) { System.out.println(e); MediaPlayer.release(); mpf.release(); System.exit(0); } }); JPanel contentPane = new JPanel(); contentPane.setLayout(new BorderLayout()); canvas = new Canvas(); mpf = new MediaPlayerFactory(); videoSurface = mpf.newVideoSurface(canvas); MediaPlayer = mpf.newEmbeddedMediaPlayer(); MediaPlayer.setVideoSurface(videoSurface); contentPane.add(canvas, BorderLayout.CENTER); //        frame.setContentPane(contentPane); frame.setVisible(true); } public void start(String mrl) { MediaPlayer.playMedia(mrl); } } 

हां, जबकि हम सिर्फ एक फाइल चलाने की कोशिश कर रहे हैं (जैसा कि कोड से देखा गया है)। Udp के साथ शुरू नहीं करना बेहतर है - यह काम नहीं करेगा। और फ़ाइल पूरी तरह से खेली जाती है, यदि आप आवश्यक रूप से संबंधित नाम के साथ इसे रखना नहीं भूलते हैं। मुझे लगता है कि सबसे नौसिखिए जाविस्टा के लिए भी उपरोक्त कोड को समझना मुश्किल नहीं होगा।

सभी नए हैं:

VLCJ के लिए कॉल करें

  new NativeDiscovery().discover(); 

और खुद मीडिया प्लेयर का निर्माण करना

  mpf = new MediaPlayerFactory(); videoSurface = mpf.newVideoSurface(canvas); MediaPlayer = mpf.newEmbeddedMediaPlayer(); MediaPlayer.setVideoSurface(videoSurface); 

और फिर हम इसे वांछित ग्राफिक पैनल में जोड़ते हैं:

 contentPane.add(canvas, BorderLayout.CENTER); 

और सब कुछ, फ़ाइल इस विंडो में खेली जाएगी।

अब प्रतिस्थापित करने का प्रयास करें

 mrl = "D:\\ttt.mp4"; 

पर

 mrl = "udp://@:40002"; 

जैसा कि हमने चुपचाप udp कनेक्शन के माध्यम से वीडियो स्ट्रीमिंग के लिए आखिरी पोस्ट में किया था।
यह संख्या यहां काम नहीं करेगी। खिड़की, ज़ाहिर है, खुलेगी, लेकिन यह एक अंजीर दिखाएगा, एक अंधेरे स्क्रीन के अर्थ में। हालांकि कोई त्रुटि लॉग नहीं होगा। वहाँ कुछ भी नहीं होगा।

यह समझ से बाहर होगा

शायद H264 कोडेक जिसे हमने सेटिंग्स में चुना है वह गायब है? बंद करो, तो कैसे ttt.mp4 फ़ाइल सिर्फ खेलते हैं? वह इस सेटिंग के साथ नहीं खेल सकता, वह mp4 है।

तुरंत समझ में आता है कि वीएलसीजे पुस्तकालय केवल खिलाड़ी के मूल को चलाता है। और प्रीसेट क्या थे, वह नहीं जानती और न जानना चाहती है। यही है, हमें जरूरत है, किसी तरह, जब जेएवीए एप्लिकेशन लॉन्च करते समय, किसी तरह वीएलसी प्लेयर पास करें जिसे हम स्पष्ट रूप से एच 264 कोडेक का उपयोग करना चाहते हैं या, कहें, हम छवि या कुछ और को घुमाना चाहते हैं।

यह पता चला है कि यह MediaPlayerFactory वर्ग का उपयोग करके किया जा सकता है। केवल हमने इसे तर्कों के बिना लॉन्च किया, या उनके साथ भी। Stackoverflow.com पर, मुझे तुरंत इमेज रोटेशन से संबंधित एक सरल उदाहरण मिला:

 String[] args = { "--video-filter", "rotate", "rotate-angle", "10" }; mpf = new MediaPlayerFactory(args); 

यही है, हम एक स्ट्रिंग सरणी के साथ मीडिया फैक्ट्री में वहां कुछ स्थानांतरित करते हैं और इसे वहां उपयोग किए जाने वाले मीडिया संसाधन के लिए संग्रहीत किया जाता है।

मैंने इस पद्धति को फ़ाइल चलाने की कोशिश की और हमेशा की तरह, कुछ भी काम नहीं किया। यह पता चला है कि वे दो डैश जोड़ना भूल गए और इसे पूरे इंटरनेट पर फैला दिया। मुझे एक समान रूपांतर विधि का उपयोग करके अनुमान लगाना था।

संक्षेप में, यह होना चाहिए:

 String[] args = { "--video-filter", "rotate", "--rotate-angle", "10" }; 

अब हमारी रेफ़रेंस फ़ाइल वापस आ गई है जैसा कि इसे करना चाहिए!



आगे यह काफी सरल होगा:

VLC कमांड लाइन के अनुसार कोडेक को निर्धारित करने के लिए, हम स्ट्रिंग सरणी में लाइन जोड़ते हैं:

 "--demux=h264" 

Udp चैनल को फिर से कोशिश कर रहा है


mrl = "udp: // @: 40002";

और इस बार सब कुछ काम करता है, मानव मन की जीत का संकेत है। अब यह वीडियो विंडो या ऐसी कई विंडो जिन्हें आप आसानी से अपने JAVA एप्लिकेशन के ग्राफिकल इंटरफ़ेस में पोर्ट कर सकते हैं।

यह एक जीत प्रतीत होगी?

वास्तव में नहीं। एक मामूली सी हलचल अस्थायी देरी या, वैज्ञानिक रूप से, लैग्स के कारण हुई। पहले तो वे कम स्वीकार्य हैं, लेकिन अगर आपके पास वीडियो को अंत तक देखने का धैर्य है, तो आप देखेंगे कि प्रसारण के पहले मिनट के अंत तक अंतराल पांच सेकंड तक पहुंच जाता है। शूटिंग के 10 मिनट के लिए मेरे पास पर्याप्त धैर्य था, लेकिन अजीब तरह से, देरी अब और नहीं बढ़ी, लेकिन उसी सीमा के भीतर बनी रही।


बेशक, कैमरे से वीडियो देखने के लिए, यह होगा, लेकिन शायद ही एक रोबोट को नियंत्रित करने के लिए। यहां तक ​​कि चंद्र रोवर ने दो बार तेजी से प्रतिक्रिया की!

कैशिंग प्रक्रियाओं पर संदेह तुरंत गिर गया और वे (संदेह) सच हो गए।

सबसे घमंडी था:

  caching for network resources 

यह बस डिफ़ॉल्ट रूप से लगभग सब कुछ खाती है, अगर यह उसे समय पर नहीं दिया जाता है।
एक अंतराल की व्यवस्था कर सकते हैं और:

 caching for cameras and microphones 

इसलिए, बहु-द्वितीय देरी से बचने के लिए, निम्न लाइनों को एक ही स्ट्रिंग सरणी में जोड़ने की सिफारिश की जाती है, जो अल्पविराम द्वारा अलग होती है:

  "--live-caching=100", "--network-caching=500", 

पैरामीटर मिलीसेकंड में वहां सेट होते हैं और इसलिए कोई भी उन्हें अपने लिए चुन सकता है।

आप कुंजी का उपयोग भी कर सकते हैं:

 "--clock-jitter=time in milliseconds", 

फिर मीडिया प्लेयर स्क्रीन को हिलाने - डुलाने वाले घबराने का अनुकूलन करने की कोशिश करेगा। लेकिन वहां, जितना अधिक समय निर्धारित किया जाता है, उतना ही इसे अनुकूलित किया जाता है और यह समझ में आता है कि क्यों। इसलिए यहां केवल आम सहमति की तलाश रहती है और कभी-कभी लॉग में इस तरह का अपमान होता है:



वह चाहता था, आप जानते हैं, घबराहट को ठीक करते हैं, और आप समय अंतराल को बहुत छोटा करते हैं। अब यह मेरी गलती है।

अब सब कुछ वैसा ही होने लगा है जैसा होना चाहिए। विलंब को एक सेकंड से कम किया गया था (हालांकि थोड़ा कम)।


नतीजतन, हमें एक बहुत छोटा काम कोड मिला

 import java.awt.*; import java.awt.event.WindowAdapter; import java.awt.event.WindowEvent; import javax.swing.JFrame; import javax.swing.JPanel; import javax.swing.SwingUtilities; import uk.co.caprica.vlcj.discovery.NativeDiscovery; import uk.co.caprica.vlcj.player.MediaPlayerFactory; import uk.co.caprica.vlcj.player.embedded.EmbeddedMediaPlayer; import uk.co.caprica.vlcj.player.embedded.videosurface.CanvasVideoSurface; public class BasicVideoPlayer { public final JFrame frame; public static String mrl; public static MediaPlayerFactory mpf; public static EmbeddedMediaPlayer MediaPlayer; public static CanvasVideoSurface videoSurface; public static Canvas canvas; public static void main(final String[] args) { new NativeDiscovery().discover(); mrl = "udp://@:40002"; SwingUtilities.invokeLater(new Runnable() { @Override public void run() { BasicVideoPlayer vp = new BasicVideoPlayer(); vp.start(mrl); } }); } public BasicVideoPlayer() { frame = new JFrame("My First Media Player"); frame.setBounds(200,100, 540, 340); frame.setDefaultCloseOperation(JFrame.DO_NOTHING_ON_CLOSE); frame.addWindowListener(new WindowAdapter() { @Override public void windowClosing(WindowEvent e) { System.out.println(e); MediaPlayer.release(); mpf.release(); System.exit(0); } }); JPanel contentPane = new JPanel(); contentPane.setLayout(new BorderLayout()); canvas = new Canvas(); String[] args = { "--video-filter", "rotate", "--rotate-angle", "270", "--demux=h264", "--clock-jitter=100", "--live-caching=100", "--network-caching=500", }; mpf = new MediaPlayerFactory(args); videoSurface = mpf.newVideoSurface(canvas); MediaPlayer = mpf.newEmbeddedMediaPlayer(); MediaPlayer.setVideoSurface(videoSurface); contentPane.add(canvas, BorderLayout.CENTER); frame.setContentPane(contentPane); frame.setVisible(true); } public void start(String mrl) { MediaPlayer.playMedia(mrl); } } 

अब आप मेरे रोबोट नियंत्रण कार्यक्रम में प्रसारित वीडियो को एकीकृत कर सकते हैं, जहां मैं टुकड़ों में वीडियो प्रसारित करता था। और मुझे कहना होगा कि कोड को बहुत सरल बना दिया गया है, और गुणवत्ता में परिमाण के क्रम में सुधार हुआ है। वीडियो स्ट्रीम में सब कुछ के अलावा, हम रीडिंग प्रसारित कर सकते हैं

accelerometers
gyros
प्रकाश स्तर
हवा का दबाव
कम्पास रीडिंग
तापमान
और नमी भी

बशर्ते, कि ये सभी सेंसर आपके स्मार्टफोन पर उपलब्ध हों।

और यहां तक ​​कि हेडलैम्प चालू करें! स्वचालित रूप से! यदि प्रकाश का स्तर गिरता है।


शायद ही किसी को कोई दिलचस्पी हो, लेकिन गितुब के लिंक के मामले में:

गाड़ी के लिए
स्मार्टफोन के लिए