H5多媒体应用

作者: 掌雄 | 来源:发表于2017-12-18 13:49 被阅读55次

随着多元化业务的发展,前端H5越来越需要对图像、音频、视频等多媒体做出:文件选择、压缩、实时数据操作等处理。文本为大家探讨一下前端H5对于图像、音频、视频的应用与对浏览器的兼容性。

一.图像

(1). 图像文件选择:拍照、相册、本地文件

对于图像文件的选择目前有一个比较好的解决方案就是直接用标签:<input type="file" accept="image/*"/>,可以在手机上出现弹出拍照、相册、本地文件等系统自带的选择,pc上也可以直接选择本地文件。

在手机上选择图片
(2). 图像文件的压缩

图像文件的压缩常用的方法是canvas
可以先用canvas context自带的scale方法先做按比例压缩
再用canvas自带的toDataURL方法做质量压缩

二.音频

对于音频前端其实并没有一个像图片那样有非常好兼容性的解决方案,下面为大家罗列一下各种方案:

(1). flash方案

好处是可以自定义界面操作,录音,实时处理音频数据,压缩,播放都是没有问题的,缺点是浏览器需要先装好flash插件,而且目前iphone手机自带的Safari浏览器默认是没有flash插件的。所以对于没有flash插件需要做引导与提示。

(2). H5标签方案

用H5标签选择音频文件<input type="file" accept="audio/*"/>,在iphone手机上没有弹出录音选择也没有在选择文件中过滤音频文件,所以H5标签选择音频文件不是一个好的解决方案

在手机上选择音频

播放音频方面可以用 audio标签
<audio controls="controls">
<source src="这里面放入音频文件路径"></source>
</audio>
用controls="controls"可以自定义播放栏

(3). navigator.getUserMedia方案

navigator.getUserMedia可以实现录音,实时处理音频数据,但是Safari等许多浏览器不兼容,所以也不是一个好的解决方案

(4). 小程序方案

小程序可以实现录音、实时处理音频数据
recorderManager.onFrameRecorded((res) => {
const { frameBuffer } = res
console.log('frameBuffer.byteLength', frameBuffer.byteLength)
})
但是只能在微信小程序上用,其它浏览器用不了

(5). js音频压缩方案

js音频建议录音的时候生成wav,因为wav音频数据比较简单,mp3的话还有额外解码。具体的做法是读取音频文件Blob数据,再处理里面的双声道变单声道,采样率16位变8位等
这里找了一篇具体的教程,大家可以参考一下:

HTML5网页录音和压缩(附源码)
http://www.cnblogs.com/blqw/p/3782420.html

另外还有一种第三方库的转换方案Ffmpeg.js这个文件太大gzip后还有6M,不太建议用这个

三.视频

(1). flash方案

跟音频一样视频都能做录制、实时处理数据、播放,但需要flash插件

(2). H5标签方案

用H5标签选择视频文件<input type="file" accept="video/*"/>,在iphone手机上弹出录视频也在选择文件中过滤视频文件,所以H5标签选择视频文件是一个好的解决方案

在手机上选择视频

播放视频方面可以用 video标签
<video controls="controls" loop="loop" autoplay="autoplay" id="video">
<source src="这里面放入视频文件路径"></source>
</video>
用controls="controls"可以自定义播放栏

(3). navigator.getUserMedia方案

navigator.getUserMedia可以实现录制,实时处理视频数据,但是Safari等许多浏览器不兼容,所以不是一个好的解决方案

(4). 小程序方案

微信小程序对于视频还没做实时数据处理,可能以后会有,而且小程序现在可以嵌入网页了,所以相比之下没有直接用H5标签选择视频文件方案好

(5). js视频压缩方案

通过canvas + video标签结合处理
获取video的原图帧,通过canavs绘制到页面
每一帧的处理跟图片一样先用canvas context自带的scale方法先做按比例压缩,再用canvas自带的toDataURL方法做质量压缩
压缩过程中会播放一次,如果不想用户看到可以用控制透明度opacity,加进度条或loading

另外Ffmpeg.js转换方案文件太大,也是不太建议使用的

总结:

图像建议用<input type="file" accept="image/*"/>标签canvas压缩

音频建议用flash方案或微信小程序方案,可以做实时数据处理,播放用<audio controls="controls"标签,音频压缩用blob数据按音频数据结构处理

视频建议直接用<input type="file" accept="video/*"/>标签录制选择,播放用<video controls="controls"标签,压缩用canvas播放一次出来,如果不想给用户看到可以用透明度控制,如果有对视频有实时数据处理建议用flash方案

您的意见是我改善的东西,欢迎评论提建议,如果对您有帮助,请点个赞,谢谢~~菲麦前端专题,汇聚前端好文,邀您关注!

相关文章

  • H5多媒体应用

    随着多元化业务的发展,前端H5越来越需要对图像、音频、视频等多媒体做出:文件选择、压缩、实时数据操作等处理。文本为...

  • 多媒体网络应用技术的学习(一)

    多媒体网络应用的分类 什么是多媒体网络应用呢?多媒体网络应用为任何应用音频和视频的网络应用; 视频: 视频最为显著...

  • 2018-10-27

    多媒体技术的概念与应用 知识点 多媒体的概念 多媒体的应用 一、 多媒体的概念 (一) 媒体、多媒体技术 1. 媒...

  • H5新标签之多媒体应用

    1、常见的视频格式 视频的组成部分:画面、音频、编码格式视频编码:H.264、theora、VP8(google开...

  • 多媒体教学环境下的历史与社会学科教学(许锴杰)

    一、多媒体理论 (一)什么是多媒体、多媒体的应用 (二)多媒体教学的有关理论 (三)多媒体学习原则 1多媒体原则 ...

  • 多媒体技术

    《多媒体技术》系统、全面地介绍了多媒体技术的基本理论和实际应用,重点讨论了多媒体软硬件的组成和应用、多媒体技术中的...

  • HTML5中新增的标签

    H5中新增了30个标签 在H5之前,HTML只能处理 文本数据和图片数据,到了H5之后,还可以处理 多媒体数据 v...

  • ## HTML基础-多媒体标签

    ## HTML基础-多媒体标签 # video标签 # audio标签 # marquee标签(跑马灯) H5新增...

  • UIWebView新的URL注入JSContext对象时机问题

    H5一般分为单页应用和多页面应用 H5单页面 在H5单页面中注入JSContext可在UIWebViewDeleg...

  • Android车载多媒体开发——MediaSession框架

    一、多媒体应用架构 1.1 音视频传统应用架构 通常,传统的播放音频或视频的多媒体应用由两部分组成: 播放器:用于...

网友评论

    本文标题:H5多媒体应用

    本文链接:https://www.haomeiwen.com/subject/jylnpxtx.html