街猫自研多媒体能力介绍
出处:
mp.weixin.qq.com
作者:
胡付义
哈啰街猫移动团队在支撑业务发展过程中,已有的多媒体基础能力存在一些问题/瓶颈: 猫屋直播 - 三方直播sdk,在MTK芯片的机型上存在兼容问题(hevc硬解报错),导致直播流无法播放,用户无法使用app的核心功能 音视频流合成、滤镜 - 需要能够灵活的支持用户去触发对猫屋直播流的截取、合成、添加滤镜等,使用系统多媒体Api,在可扩展性,流处理效率,兼容性,以及滤镜的支持上,都存在问题 视频转码 - 猫友圈上传的用户视频,需要对其做转码后发布,转码最大的问题是,源视频的格式和参数是不确定的(Android),如果只用系统多媒体Api去处理,会存在各种各样的兼容性问题,结果要么是转码失败,要么视频发布后,其他端的用户观看异常 所以需要自研多媒体框架去解决/优化上述问题,以便后续能够更好的支撑业务发展。