问答文章1 问答文章501 问答文章1001 问答文章1501 问答文章2001 问答文章2501 问答文章3001 问答文章3501 问答文章4001 问答文章4501 问答文章5001 问答文章5501 问答文章6001 问答文章6501 问答文章7001 问答文章7501 问答文章8001 问答文章8501 问答文章9001 问答文章9501

短视频开发面临的主要技术问题有哪些?

发布网友 发布时间:2024-03-15 11:40

我来回答

1个回答

热心网友 时间:2024-08-03 21:39

短视频所面临的架构问题:
1.短视频APP开发时的数据处理需求
客户端主要是对于视频的效果叠加、人脸识别和各种美颜美化算法的处理。同时客户端处理还会增加一些必要的转码和水印的视频处理。
目前客户端的视频编解码方式,会有软编码和硬编码的方式,软编码主要是兼容性比较好,编码效果好些,不过缺点就是能耗高且慢些。而硬编码借助于显卡等,能够得到比较低的能耗并且更快,不过兼容和效果要差一些,特别是对于一些低配的机型。所以目前往往采用结合的方式。
服务端的处理,主要是进行视频的一些审核转码工作,也有一些抽帧生成截图的工作等,目前使用ffmpeg进行一些处理。服务端本身需要考虑的一些点,就是因为资源消耗比较高,所以需要机器数会多,所以在服务端做的视频处理操作,会尽量控制在一个合理的范围。
2.短视频APP开发中音视频不同步问题
媒体内容在播放时,最令人头痛的就是音视频不同步。从技术上来说,解决音视频同步问题的最佳方案就是时间戳:首先选择一个参考时钟(要求参考时钟上的时间是线性递增的);生成数据流时依据参考时钟上的时间给每个数据块都打上时间戳(一般包括开始时间和结束时间);在播放时,读取数据块上的时间戳,同时参考当前参考时钟上的时间来安排播放。可见,避免音视频不同步现象有两个关键——一是在生成数据流时要打上正确的时间戳。如果数据块上打的时间戳本身就有问题,那么播放时再怎么调整也于事无补。打时间戳时,视频流和音频流都是参考参考时钟的时间,而数据流之间不会发生参考关系;也就是说,视频流和音频流是通过一个中立的第三方(也就是参考时钟)来实现同步的。第二个关键的地方,就是在播放时基于时间戳对数据流的控制,也就是对数据块早到或晚到采取不同的处理方法。
声明声明:本网页内容为用户发布,旨在传播知识,不代表本网认同其观点,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。E-MAIL:11247931@qq.com
word绘制施工进度横道图!表格好了,中间的横道杂往上打!!!急急急_百 ... 如何用 SWOT 模型进行自我分析? 求朋友圈、公众号文案排版工具? 写文案用什么软件 回复文案的软件推荐 学习挖掘机需要什么条件 学挖机新手从哪里学 挖掘机学习都学什么 新手学开挖掘机先学哪些 手工麦芽糖怎么做? 麦芽糖怎么做小零食 刻锐g18说明书在哪 刻锐T1报警器说明书在哪里下载? ...号在最近24小时内绑定过三个,已达到限制,...24小时后可以再次... 不知道今天为什么无缘无故流鼻血 2.5d屏幕需要贴膜吗61 求索尼z5 蓝光手机膜,哪里有得买 SONY Z5屏幕是不是有点奇怪 懂的人帮忙看一下,贵不贵,尤其是贴膜,不懂贴膜 手机要不要贴膜,这其实是个很重要的问题 那些玩游戏就能领取华为p30碎片且10个碎片就能领手机的App,是真的... 圣诞节送什么礼物给女朋友比较好呢? 手机号1 24 手机号24小时内绑定了两个被限制 请问什么时候才能重 ... 电子烟商标转让所需时间是多久? 科比去世瓦妮莎母亲争财产,她是怎样怼瓦嫂的呢? dungeonrush最新版本如何下载 脸上眉毛中间和嘴巴旁边长了好多小颗粒很硬挤出来是白色的挤出来小颗粒... 眉毛上面总是有白色颗粒,怎莫回事 眉毛之间有很多小疙瘩...挤出来是条白色的东西..谁可告诉我解决的办法... 眉毛中间老是突然长痘痘,不红也不痒就是突起来一点,然过两天那个点就... 在文言文中,“之”“其”多指代某人、某事、某物,下面的句子,他们分 ... 短视频创业的核心问题都有哪些? 欧包的日常做法有哪些? 电脑软件下载在c盘哪里 下载的东西默认存在C盘哪个位置? 动态对比度和静态对比度区别? 老师发了孩子们拔河比赛冠军的朋友圈,家长怎么留言 ...号在最近24小时内绑定过三个,已达到限制,...24小时后可以再次... 最早启发科学家去研究光电效应的元素 神脑洞第104关如何通关 一杯牛奶,用什么方法才能先喝到杯底? 雅马哈P85电钢琴怎么换音色呀? 雅马哈p85有蓝牙吗 猫棒不支持语音吗? 怎么找公用充电宝 谁能提供一份电钢琴雅马哈p85说明书 杭州融创望潮印二期在哪里? 微信手机号在24小时内,已绑定两个,已达到限制,不能在绑定其他微信... 成都融创玖阙府二期商铺产权年限多少年? vivoz5手机出场时后摄像头有贴膜吗? 手机镜头膜有没有贴的必要?5