首页 > 代码库 > 手机端的音视频监控系统开发
手机端的音视频监控系统开发
网络信息化的趋势，随着流媒体技术、无线网络技术以及视频压缩技术的不断进步，视频监控技术得到了广泛的应用，同时，监控的规模和范围也在不断的扩大。人们对于安全保障的要求不断的提高，从而使得过去以图文为主的内容服务应经不能够满足用户的需求，取而代之的则是音视频多媒体服务。使用移动终端技术的视频监控系统，不仅具有体积小型化、安装傻瓜化以及配置灵活化的优势，最重要的是还降低了成本。由于网络功能和视频压缩都被集中的保存在小体积的设备中，因此，通过网络远程监控视频设备就可以获得监控视频。目前，网络视频监控不仅面向企业级客户，逐渐的，也通过视频监控为大众提供服务。如旅游景点人流、景点查看、交通导航等。基于开放平台的移动视频监控已经成为监控研究领域的热点
视频监控系统需要的传输数据分为两类：控制信息和视频数据。尽管两类数据进行传输的时候都是基于IP协议进行的，但是，他们分别采取了应用层协议和传输层协议，这是由于两者的特性要求和实现软件的规模不同引起的[3]：第一，采用TCP传输层协议进行信息控制。之所以采用TCP/IP的传输模式进行信息控制，这是由于控制信息虽然不要求较高的实时性，但是对于传输的可靠性要求却十分高。因此，采用了有严格握手过程和重传机制的TCP传输层协议。第二，传输视频数据时，采用RTP应用层协议和UDP传输层协议。由于网络视频的时效性要求远远高于可靠性，因此，本文采用了RTP应用层的传输协议支持实时传输服务。在传输层，虽然UDP尽量采用交付方式进行出数据传输，但是却没有拥塞控制，从而对于大数据量的实时视频数据比较适合此方式，因此，本论文采用UDP协议作为传输层协议。接收到上层应用程序的多媒体信息码流后，经过RTP装配成数据包发送给下层，然后在通过UDP/IP协议封装后形成RTP流。传输控制子系统是基于RTP协议构建的，通过传输层通信使用的UDPSocket完成。
在PC机上完成了对视频监控系统应用程序的开发，主要采用图片接收方式来实现移动平台的智能视频监控系统。
该视频监控系统的客户端主要通过TCP/IP协议和服务器端进行实施通信的，同时利用Socket实现整个过程。作为通信链句柄的Socket网络通信套接字用于描述端口和IP地址。通过Socket编程，应用程序会向网络发出请求或应答网络请求。Socket作为通信的基石，支持TCP/IP协议的网络通信的基本操作单元。本程序中使用的Socket传输模式，是面向连接的Socket操作使用TCP协议。Socket在该模式下，必须在客户端和服务端建立Socket连接，一旦建立好连接，便可以在一个流接口进行打开、读、写以及关闭等操作，而另一端则以相同的顺序接受所有的信息。相比无连接而言，虽然面向连接的操作效率较低，但数据却具有更高的安全性。基于Android视频服务器系统终端，必须通过采用Socket网络通信技术接受来自监控前端的视频数据。Socket通信使得监控前端和终端，通过网络连接实现数据的交互。Socket连接初始化后才能进行Socket通信，其实现过程与面向连接的Socket通信相同。创建Socket服务线程，当产生监听后，服务主进程负责不断循环的监听接收到的请求，同时建立新的客户连接Socket，创建针对此Socket的通信进程。在视频监控系统中创建Socket的过程，首先用ServerSocket serverSocket=null在服务器端创建一个Socket，然后用serverSocket=newServerSocket（8888）监听端口8888。如果在该端口接收到客户端Socket的请求，则用Socket client=serverSocket.accept（）来创建一个Socket对象。建立连接后，调用InputStreamReader来接收服务器端发送的视频数据，然后通过BufferedReader将此数据读取出来。服务器从前端采集系统接收的数据通过BufferedWriter写入，并通过OutputStreamWriter发送给网络客户端。通信完毕之后，通过os.close（）、is.close（）和socket.close（）来关闭输出输入流并关闭Socket端口，服务器停止Socket通信。网络客户端终端作为接收数据的客户端，首先用Socket socket=null在终端创建一个Socket，然后设置Socket通信的服务器的IP地址和通信端口socket=new Socket（"192.168.1.101"，8888），成功与服务器建立连接后，用InputStreamReader创建输入流，之后通过BufferedReader读取出来，进行解析并显示在用户端界面上，数据接收完毕后，通过BufferedWriter写入接收完毕信息并通过OutputStreamWriter发送至服务器，通信完毕后，通过os.close（）、is.close（）、socket.close（）关闭输入输出流，并关闭Socket端口，至此整个Socket通信完成。
由于服务器发送的是解码后的图片数据，因而客户端接收到的数据流可以组成一幅图片[5-6]。通过Android提供的BitmapFactory.decodeByteAllrayO函数，可以从接收到的数据流中得到Bitmap格式的对象。后文的处理皆针对此Bitmap对象进行。
为了实现监控画面的显示，需继承View类，重写了onDraw（）方法。其中，在onDraw（）方法中所实现的内容，将在客户端界面上显示出来。定义一个Bitmap对象，此对象将在画布中绘制出来。当负责接收图片的线程接收到新的图片数据时，将数据传给该对象，并在线程中调用postlnvalidate0方法，重绘画面。为了系统实现更好的显示效果，本设计采用了双缓存机制。显示的画面存储在原先对象中，而接收的画面存储在变量另一对象中。如果网络状况不好，并不能及时接收到新的数据，使得另一对象为空，则原先的变量不更新，还将显示之前的画面，这样处理将在一定程度上提高用户体验，减少网络状况不好情况下的突发性黑屏。
根据Android的GUI系统，能够实现远程视频实时监视的用户界面，并提供播放器和用户之间的交互接口。Java和C语言框架共同组成了GUI系统，此系统对下层通过调用显示输入、输出设备的驱动，将Android的软件系统和底层的硬件联系起来；此系统对于上层提供了Java层次的绘图接口，Android的Java框架层调用这些接口来构建各种UI元素。此外，Java也可以调用绘图接口。
手机端的音视频监控系统开发