iNeuOS工业互联平台，.NETCore开发的视频服务组件iNeuVideo，RTSP转WebSocket

1. 概述... 2

2. 将来集成到iNeuOS平台演示... 3

3. iNeuVideo结构... 3

4. iNeuVideo部署及应用... 3

5. HTML5终端视频监测代码... 5

6. 基于数据库应用使用效果... 6

1. 概述

iNeuVideo是视频服务组件，主要负责把RTSP的视频流数据转码成WebSocket协议的视频流数据，为终端提供视频监测服务。iNeuVideo后期会集成到iNeuOS工业互联网平台的Web组态（iNeuView）上，拖动组件快速构建视频监测。结合物联网服务（iNeuKernel）采集设备或传感器的数据，形成视频数据+设备数据的整体监测服务。参见《iNeuKernel（物联网核心组件）远程控制标准化设计与实现》，可以实现远程控制。

iNeuVideo现在仅支持RTSP->WebSocket，现在主流摄像头厂家（海康威视等）基本支持RTSP协议，可以很方便的接入视频数据流。后期集成RTSP->RTMP和RTSP->HTTP的协议。基于iNeuVideo服务，其他公司也可以形成自己的产品，后面应用会具体介绍。

应用效果，如下图：

针对视频监测几个协议概念：RTSP、RTMP、HTTP和WebSocket等进行简单介绍：

（1）RSTP、RTMP、HTTP协议共同点，他们都是应用层协议。理论上这三种协议都可以做直播和点播，但直播一般用RTSP和RTMP点播用HTTP。
（2）RSTP、RTMP、HTTP协议区别

HTTP将数据作为文件处理，所以HTTP不是流媒体协议，RTMP和RTSP是流媒体协议。

RTMP是Adobe的私有协议，未完全公开，RTSP和HTTP是共有协议。
RTMP一般传输flv,f4v格式流，RTSP传输ts，MP4格式流，HTTP没有特定的流。

RTSP一般需要2-3个通道，数据和命令通道分开，RTMP和HTTP在一个通道上传输命令和数据。

WebSocket协议，基于HTML5提供的一种在单个 TCP 连接上进行全双工通讯的协议。针对终端与服务端交互应用较广泛。

2. 将来集成到iNeuOS平台演示

在线演示：http://demo.ineuos.net （注：服务器比较慢，请耐心等待。自已注册用户，体验系统功能）

视频演示：http://www.ineuos.net/video/iNeuOS%20and%20app.mp4

驱动开发：http://www.ineuos.net/index.php/products/ineukernel-15.html （v2.1版本）

手机APP：http://demo.ineuos.net/app/ineuos_app.apk

3. iNeuVideo结构

视频源一般为RTSP协议，由iNeuVideo转码服务拉取视频流数据，经过代码转发服务向WebSocket连接的终端广播数据，HTML5终端进行数据展示。结构示意，如下图：

4. iNeuVideo部署及应用

iNeuVideo基于.NETCore 3.1版本开发，.NETCore 3.1的安装部署参见：https://dotnet.microsoft.com/learn/dotnet/hello-world-tutorial/install。

iNeuVideo下载：百度网盘下载，包括服务、数据库脚本和HTML5脚本。这是绿化版本的软件，直接下载就可以应用，应用有两种模式：基于命令行和基于数据库。

（1）基于命令行的应用

首先使用管理员模式打开命令行，进入iNeuVideo目录，第一次运行的时候需要执行：dotnet iNeuVideoTool.dll，检测和配置当前系统。

其次输入参数执行：dotnet iNeuVideo.dll rtsp://192.168.101.1:18554/stream1，进行视频转换，视频转换后的WebSocket地址对应：ws:// 192.168.101.1:9091/ineuos/live1，live后边的编号自动增加。如下图：

（2）基于数据库的应用

其他公司可以使用iNeuVideo服务组件，基于数据库的应用形成自己的产品，前台业务系统操作数据库可以完成对视频流拉取、转码、推送等全流程操作。

mysql数据库只有一个表：Video，只需要对这个表进行操作，表结构如下：

DROP TABLE IF EXISTS `video`;
CREATE TABLE `video`  (
  `Id` varchar(32) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '主键',
  `Key` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT 'http://*.*/ineuos/live1,live1就是key.',
  `VideoSource` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '视频流源地址，一般为rtsp协议。',
  `VideoSourceProtocol` varchar(10) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '现在支持，包括：rtsp。',
  `VideoDest` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '视频流目标地址，从VideoSource转码到VideoDest，不需要设置，系统自动生成。',
  `VideoDestProtocol` varchar(10) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '现在支持，包括：websocket。',
  PRIMARY KEY (`Id`) USING BTREE,
  UNIQUE INDEX `Key`(`Key`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_bin ROW_FORMAT = Dynamic;

在iNeuVideo\iNeuKernel\ SourceConfig.cfg文件下配置数据库连接信息

以管理员的模式运行【start-win.bat】批处理文件，直接读取数据库的信息进行视频流的操作，不需要其他的操作。

5. HTML5终端视频监测代码

基于MPEG标准的视频编码进行解码，底层使用canvas进行显示，也有其他的JS组件可以使用。代码如下：

<!DOCTYPE html>
<html>
<head>
       <title>JSMpeg Stream Client</title>
       <style type="text/css">
              html, body {text-align: center;}
       </style>
</head>
<body>
       <canvas id="video-canvas"></canvas>
       <canvas id="video-canvas1"></canvas>
       <script type="text/javascript" src="jsmpeg.min.js"></script>
       <script type="text/javascript">
              var canvas = document.getElementById('video-canvas');
              var url = 'ws://127.0.0.1:9091/ineuos/live1';
              var player = new JSMpeg.Player(url, {canvas: canvas});

              var canvas1 = document.getElementById('video-canvas1');
              var url1 = 'ws://127.0.0.1:9091/ineuos/live2';
              var player1 = new JSMpeg.Player(url1, {canvas: canvas1});
       </script>
</body>
</html>