(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210768285.8 (22)申请日 2022.07.01 (71)申请人 深圳市炫 本电子有限公司 地址 518100 广东省深圳市宝安区新 桥街 道新二社区庄村路50号鑫龙科技园B 栋5 (72)发明人 陈灿佳　陈如珊　 (74)专利代理 机构 深圳华屹智林知识产权代理 事务所(普通 合伙) 44785 专利代理师 陈裕恒 (51)Int.Cl. H04N 7/15(2006.01) H04N 7/18(2006.01) H04N 5/76(2006.01) H04N 21/6437(2011.01)H04L 69/22(2022.01) H04L 9/40(2022.01) H04L 65/10(2022.01) H04L 65/403(2022.01) H04L 65/75(2022.01) H04L 65/65(2022.01) (54)发明名称 基于视频监控和视频会议融合的智能系统 (57)摘要 本发明公开了基于视频监控与视频会议融 合的智能系统， 包括会议端、 认证模块、 数据分析 模块、 客户端模块、 监控模块、 服务器和控制器, 本发明通过设置认证模块对客户端和监控端进 行身份验证， 避免了系统中数据的被窃取， 对会 议端和客户端的媒体文件进行获取通过自定制 认证保报文头按照TCP协议对媒体文件进行传 输， 避免了媒体文件在传输的过程中出现丢失， 并且按照RTCP协议同时对客户端和监控端实时 传输， 将会议端的媒体文件和客户端的媒体文件 分开存储， 并设置过期时间， 避免了系统因长期 的使用导 致的卡顿情况的发生。 权利要求书3页 说明书8页 附图1页 CN 115174844 A 2022.10.11 CN 115174844 A 1.基于视频监控和视频会议融合的智能系统， 其特征在于， 包括会议端、 认证模块、 数 据分析模块、 客户端模块、 监控 模块、 服务器和控制器； 所述会议端用于发起并录制会议媒体文件， 所述会议端包括第一处理器、 会议音视频 编解码器和会议显示单元， 所述第一处理器 向控制器发送会议指令， 所述控制 器接收第一 处理器发送的会议指令， 所述控制器在接受到第一处理器发送的会议指令后生成查询指 令， 所述控制器在生成查询指令后向认证模块传输查询指令； 所述客户端用来开展显示会议， 所述客户端模块包括第三处理器、 客户端音视频采集 单元、 媒体数据库和 客户端显示单元， 所述第三处理器接 收控制器传输的会议开启指令后 生成接收会议指令， 所述第三处理器在生成接 收会议指令后向控制 器传输接 收会议指令， 所述控制器接收第三处理器传输的接收会议指 令， 所述控制器在接收到第三处理器传输的 接收会议指令后向会议端传输开启指令， 所述第一处理器接 收控制器传输的开启指令， 所 述第一处理器在接收到控制器传输的开启会议指 令后同时向会议显示单元传输开启指 令， 所述会议显示单元接收第一处理器传输的开启指 令， 所述会议显示单元在接收到第一处理 器传输的开启会议指 令后开启会议并在 会议端桌面显示， 所述会议显示单元开启会议并在 会议端桌 面显示后按照RTCP协议同步将会议内容传输 到客户端模块， 具体的步骤如下： C1： 所述第一处 理器根据SIP协议向客户端生成并发起 一个一对多模式的会话； C2： 所述第 一处理器获取会议显示单元开启会议后的音视频媒体数据并将其传输到会 议音视频编解码器； C3： 所述会议音视频编解码器对获取的音视频媒体数据按照H.264格式编码并生成会 议媒体文件； C4： 所述第一处 理器将会议 媒体文件按照一定传输步骤传输 到服务器； 具体的传输步骤如下： D1： 所述第一处 理器将媒体文件转 化为媒体数据流； D2： 所述第一处理器获取媒体数据流的大小， 并通过TCP协议按照一定的防丢包规则进 行传输， 具体的防丢包规则如下： E1： 所述第一处 理器将媒体数据流使用st ruct模块 转化成固定 长度的字节； E2： 第一处理器依次将媒体数据流使用struct模块转化成固定长度的字节作 为媒体数 据流的报头和媒体数据流作为数据发送给服 务器； 所述服务器用来接收并处理媒体数据流， 所述服务器包括音视频编解码器， 所述服务 器按照一定的接收规则接收并处 理媒体数据， 具体的处 理规则如下： F1： 所述服务器接收第一处 理器传送的数据； F2： 所述服务器读取第一处 理器传送的数据得到固定 长度的字节； F3： 所述服务器按照获取的固定 长度字节来接收第一处 理器第二次传送的数据； F4： 所述服务器将第一处理器第 二次传送的数据转化成媒体数据并通过音视频解码模 块转化成媒体文件并设置过期时间一月； 所述服务器将媒体文件传输给客户端模块， 所述第 三处理器接收服务器传输给客户端 模块的媒体文件， 所述第三处理器接收务器传输给客户端模块的媒体文件后将媒体文件传 输给客户端显示单元， 所述客户端显示单元接 收第三处理器传输的媒体文件， 所述客户端 显示单元在接收到第三处 理器传输的媒体文件后将媒体文件在客户端显示屏上进行显示；权　利　要　求　书 1/3 页 2 CN 115174844 A 2所述客户端音视频采集单 元用于采集 客户端的音视频文件， 具体采集 步骤如下： 步骤一： 进行 时间划分， 将时间划分为24个标准时间段， 标准时间段从00:00到01： 00为 一个标准时间段， 依次类 推得到所有的标准时间段Tn,n ＝1...24； 步骤二： 按照标准时间段， 依次对客户端的视频和音频进行采集， 并生成录制数据； 所述第三处理器获取录制数据和录制时间， 所述第 三处理器获取录制数据和录制时间 后将录制时间作为文件名生成对应的录制媒体文件， 所述第三处理器在生成对应的录制媒 体文件后 将录制媒体文件存储在媒体数据库中， 所述媒体数据库用于存储录制媒体文件的 本地地址。 2.根据权利要求1所述的基于视频监控和视频会议融合的智能系统,其特征在于， 所述 认证模块用于注册并认证会议端和监控端的MAC地址信息， 所述认证模块包括第二处理器、 客户端信息数据库和监控信息数据库， 所述第二处理器接收控制器向认证模块传输的查询 指令， 所述第二处理器在接受到控制器向认证模块传输的查询指 令后对会议客户端信息数 据库中的会议客户端 数据按照一定的规则进 行查询并生成客户端信息数据， 具体的查询规 则如下： A1： 通过sql结构化 查询语句将MAC作为 查询字段对客户端信息数据库做 精确查询； A2： 将查询后的数据按照一定的拼接规则进行拼接生成客户端信息数据； 具体的拼接规则如下： B1： 所述第二处理器分别获取到会议客户端信息数据库中MAC字段对应的MAC地址数据 Mn,n＝1...； B2： 将所述第二处理器分别获取到的会议客户端信息数据库中MAC字段对应的数据存 放在列表中， 以 “，”分隔开， 得到一组列表[M1,M2,. ..,Mn]形式组成的信息数据； B3： 所述第二处理器将MAC作为字段的键， 列表[M1,M2,...,Mn]作为字典的值进行拼 接， 得到一组以字典{MAC: [M1,M2,. ..,Mn]}形式组成的会议 客户端信息数据； 所述第二处理器将客户端信 息数据传输到数据分析模块， 所述数据分析模块接收第 二 处理器传输的客户端信息数据， 所述数据分析模块接收到第二处理器传输的客户端信息数 据后对客户端信息数据按照一定的解析规则解析到多组MAC地址数据， 具体的解析规则如 下： S1： 第二处 理器获取客户端信息数据并获取到 字典的键 MAC； S2： 通过字典的键 MAC获取字典的键 MAC所对应的值列表[M1,M2,. ..Mn]； S3： 通过列表索引切片的方式取 出列表中的每一个数据， 得到多组MAC地址数据； 所述数据分析模块将多组MAC地址数据传输到控制器， 所述控制器用来对客户端模块 发送会议开启指 令， 所述控制器接收数据分析模块传输的多组MAC地址数据， 所述控制器接 收到数据分析模块传输的多组MAC地址数据后向客户端模块传输会议 开启指令 。 3.根据权利要求1所述的基于视频监控和视频会议融合的智能系统,其特征在于， 所述 视频监控端包括第四处理器和监控端显示单元， 所述视频监控模块用于监控会议端和客户 端， 具体步骤如下： G1： 所述第四处 理器向控制器传输认证指令； G2： 所述控制器向认证模块传输查询指令； G2： 所述第二处理器接收控制器向认证模块传输的查询指令， 所述第二处理器在接受权　利　要　求　书 2/3 页 3 CN 115174844 A 3