在视频部分,通过实时消息 RTM SDK 将人脸骨骼数据实时传输到频道中让其他用户订阅还原人脸。而语音部分则是通过 RTC SDK 将声音进行实时传输并让用户进行订阅。可实现同步换脸、变声聊天等功能。

除了「Vchat」,还有「灵动课堂答题组件」、「Agora X-Runtime」、「Weln」、「欢信()」、「智能AR毛笔临摹教学系统/CopyTeachWorks」作品获得了此次大赛“应用创新赛道”的优秀奖。

2、技术创新赛道

技术创新专项奖:人脸识别

「技术创新专项奖」获奖作品是一个在 iOS 平台上使用 AgoraEngineKit2 开发接入一个基于 C++ 语言封装的「人脸识别」插件。

作品通过 TYSMExtensionManger 类与对外交互,对内则处理插件实现的相关逻辑。将 IExtensionProvider、IVideoFilter 和自己的开发的 Processer 都放在同一个地方。用 framework 方式对外公开两个文件,既方便开发者查阅,同时也可作为作为参数传递,增强代码可阅读性。

该插件可以支持人脸检测、追踪、以及多脸的追踪识别,对脸部轮廓、眼睛、眉毛、鼻子、嘴巴等识别到的区域以 3D 点状作出反馈。

优秀奖:Water Mask

「Water Mask」项目是“技术赛道”中的参赛作品,通过在声网 SDK 的视频采集或者播放环节,在 YUV 域上或者编码后添加图片或文字类型的隐性水印。

隐性水印(盲水印)添加后,用户不能直接看到视频中的水印信息。在保护视频发布者版权的同时,也保障了用户的视频观看体验。未来,「Water Mask」还希望在音频处理上,可以扩展声纹水印,在视频版权追溯、认证防伪等场景为行业带来更多、更好的体验。

与开发者共成长共创RTE行业新价值

作为首个将实时音视频作为PaaS服务提供给开发者和客户使用的企业,声网一直以来都在身体力行地积极推进RTE开发者生态和行业生态的构建,力求能够提供“实实在在”有利于行业及开发者的实时互动云服务。

2015年,为推动全球RTE行业开发者更好的进行技术交流和分享,声网在成立不到2年的时间里,便率先举办了全球最大规模的实时互联网大会,至今已经举办了6届,累计数万名全球开发者、行业大咖、技术专家、投资人等参会。

2019年,声网面向开发者举办了第一届RTE创新编程挑战赛,至今已有超千名开发者组成的500+参赛团队,创造了100多个优秀作品。开发者基于声网提供的技术服务与支持,以自己对实时互动场景理解出发,实现了多个实时互动创意作品。

去年,以发现更多为行业创造创新价值的独角兽企业为目的,声网联合五源资本和奇绩创坛举办了全球首个实时互联网创业挑战赛,在全球范围内寻找“使用实时互动技术进行创新”的企业和场景,活动吸引了100+优质企业参赛,并最终胜出了三家在社交领域、声乐教学领域、协同办公领域有创新性产品的企业,借助资本的力量,有效推动实时互联网创业生态的发展和繁荣。

除以上活动外,声网还通过开发者社区,专注于分享与传播技术团队在RTC领域的研发成果、技术解决方案、以及前沿技术探索,与开发者和技术合作伙伴一起交流、共同成长。很多内容都深受开发者的欢迎。

面向未来,声网将持续深耕RTE领域,与开发者和技术合作伙伴共同挖掘实时音视频应用新场景,共创行业新价值。