H5+springboot(集成ffmpeg)实现前端视频录制以及webm格式转mp4

H5+springboot(集成ffmpeg)实现前端视频录制以及webm格式转mp4

1、前端实现(仅供参考)

献上代码:

<!DOCTYPE html>

<html lang="en">

<head>

    <meta http-equiv="Content-Type" content="text/html; charset=UTF-8">

    <meta charset="utf-8">

    <meta name="viewport" content="width=device-width, initial-scale=1.0, user-scalable=no">

    <meta http-equiv="X-UA-Compatible" content="IE=edge,chrome=1">

    <title>视频流采集</title>

    <script src="../js/jquery/jquery-3.5.1.min.js"></script>

    <script src ="../js/file/FileSaver.js"></script>

<!--    video适配浏览器-->

    <script src = "https://webrtc.github.io/adapter/adapter-latest.js"></script>

    <script src="../js/mediaStreamRecorder/MediaStreamRecorder.js"></script>

<!--    css-->

    <style type="text/css">

        body {

            width: 100%;

            height: 100%;

        }

        .container {

            position: absolute;

            display: flex;

            flex-direction: row;

            left: 0px;

            width: 100%;

            height: 100%;

        }

        .container .left {

            width: 50%;

            height: 100%;

            background: #b5e3ad;

        }

        .left video {

            width: 100%;

            height: 100%;

            left: 0px;

            bottom: 0px;

        }

        .container .right {

            width: 50%;

            height: 100%;

        }

        .right .btn_block {

            display: flex;

            flex-direction: row;

            justify-content: center;

            align-items: center;

            background: #898c8c;

            margin-top: 0px;

            width: 100%;

            height: 50px;

        }

        .btn_block button {

            width: 90px;

            height: 40px;

            margin-right: 20px;

            margin-left: 20px;

            font-size: 12px;

            font-weight: bold;

        }

        .right .remark {

            width: 100%;

            height: 100%;

            background: #d99540;

            margin-bottom: 0px;

        }

    </style>

<!--    js-->

    <script type="application/javascript">

        $(function (){

            console.log('音视频采集');

            let videoPlayer = document.getElementById('player');

            //开始录制

            let mediaRecorder;

            $('#beginAction').click(function (){

                console.log('开始录制');

                if(!navigator.mediaDevices || !navigator.mediaDevices.getUserMedia){

                    console.log('getUserMedia is not supported');

                }else{

                    const constraints = {

                        video: true,

                        audio: true

                    };

                    navigator.getUserMedia(constraints, onMediaSuccess, onMediaError);

                }

            });

            function onMediaSuccess(stream){

                videoPlayer.srcObject=stream;

                videoPlayer.play();

                //

                mediaRecorder = new MediaStreamRecorder(stream);

                mediaRecorder.mimeType = 'video/webm';

                let _blob;

                mediaRecorder.ondataavailable = function (blob) {

                    console.log('获取视频流数据... ...'+blob);

                    _blob=blob;

                };

                mediaRecorder.onstop=function (err){

                    console.log("已下载至本地")

                    let fileName='video-'+Math.floor(Math.random()*100000)+'.webm';

                    let file = new File([_blob], fileName, {

                        type: 'video/webm'

                    });

                    saveAs(file);

                };

                mediaRecorder.start(100);

            }

            function onMediaError(e){

                console.error('media error', e);

            }

            //停止

            $('#stopAction').click(function (){

                mediaRecorder.stop();

                if(!videoPlayer.srcObject){

                    return;

                }

                let player = videoPlayer.srcObject;

                let tracks = player.getTracks();

                tracks.forEach(track => {

                    track.stop()

                });

            });

            //查看当前浏览器支持媒体类型

            const types = ["video/webm",

                "audio/webm",

                "video/webm\;codecs=vp8",

                "video/webm\;codecs=daala",

                "video/webm\;codecs=h264",

                "audio/webm\;codecs=opus",

                "video/mpeg"];

            for (let i in types) {

                console.log( "Is " + types[i] + " supported? " + (MediaRecorder.isTypeSupported(types[i]) ? "Maybe!" : "Nope :("));

            }

        });

    </script>

</head>

<body>

    <div class="container">

        <div class="left">

            <video autoplay playsinline id = "player" width="400" height="350"></video>

        </div>

        <div class="right">

            <div class="btn_block">

                <button id="beginAction">开始录制</button>

                <button id="stopAction">停止录制</button>

            </div>

            <div class="remark">

            </div>

        </div>

    </div>

</body>

</html>

引入文件解释:

FileSaver.js 文件保存本地js,这个js是在网上查找的,如果客观找不到或者嫌弃,可以直接使用a 标签,下载本地。

adapter-latest.js video标签适配浏览器。

MediaStreamRecorder.js 这个js文件是二次封装,参考GitHub  https://github.com/streamproc/MediaStreamRecorder 直接找到源文件 放在自己工程中。

jquery-3.5.1.min.js 这个就不多说了。

备注:前端目前支持webm格式视频,如果要使用mp4格式需要自己转换,在前端去转换格式会消耗很大的cpu,所以视频格式转换放在后台。客官可以在保存本地视频文件地方自己发送ajax或者其他请求方式上传至后台服务,这里就不多说了。

2、后台springboot 简略代码(仅供参考)

献上代码:

public static void main(String[] args) {

        System.out.println("测试======");

        String filePath="/Users/dongxr/Desktop/video-5322.webm";

        File file=new File(filePath);

        FFmpegFrameGrabber frameGrabber = new FFmpegFrameGrabber(file);

        String fileName = null;

        Frame captured_frame = null;

        FFmpegFrameRecorder recorder = null;

        try {

            frameGrabber.start();

            fileName = file.getAbsolutePath() + "__.mp4";

            recorder = new FFmpegFrameRecorder(fileName, frameGrabber.getImageWidth(), frameGrabber.getImageHeight(), frameGrabber.getAudioChannels());

            recorder.setVideoCodec(avcodec.AV_CODEC_ID_H264);

            recorder.setFormat("mp4");

            recorder.setSampleRate(frameGrabber.getSampleRate());

            recorder.setFrameRate(frameGrabber.getFrameRate());

            recorder.setVideoBitrate(10 * 1024 * 1024);

            recorder.start();

            boolean bool=false;

            while ((captured_frame = frameGrabber.grabFrame()) != null) {

                try {

                    System.out.println("时长2==="+captured_frame.timestamp);

                    recorder.setTimestamp(frameGrabber.getTimestamp());

                    recorder.record(captured_frame);

                } catch (Exception e) {

                    System.out.println(e);

                }

            }

            recorder.stop();

            recorder.release();

            frameGrabber.stop();

        } catch (Exception e) {

            e.printStackTrace();

        }

    }

maven依赖引入:

<dependency>

            <groupId>org.bytedeco</groupId>

            <artifactId>javacv-platform</artifactId>

            <version>1.5</version>

        </dependency>

因为我是mac,引入最新的javac 一直提示opencv依赖下载失败,所以这里我就选择了低版本的依赖。

备注:这里只是把前端生成本地的webm格式的视频文件转换为mp4格式的。

嘻哈---我认为写博客还是直接点比较好,毕竟大家都喜欢ctrl+c. ctrl+v,哈哈哈哈哈哈哈。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,193评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,306评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,130评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,110评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,118评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,085评论 1 295
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,007评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,844评论 0 273
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,283评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,508评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,667评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,395评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,985评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,630评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,797评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,653评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,553评论 2 352

推荐阅读更多精彩内容

  • 2018web前端最新面试题总结 一、Html/Css基础模块 基础部分 什么是HTML?答:​ HTML并不是...
    duans_阅读 4,667评论 3 27
  • CSS 盒模型在一个文档中,每个元素都被表示为一个矩形的盒子。确定这些盒子的尺寸, 属性(颜色,背景,边框方面)和...
    UncleMing0221阅读 373评论 0 1
  • 原文:Paul Kinlan翻译:Agora.io 长久以来,我一直希望能够直接从Android屏幕上进行录制并将...
    声网阅读 5,340评论 1 2
  • 想到视频录制,肯定又是运用MediaRecorder,这个类实在是方便,但是好用的东西一定要慎重,毕竟没有那么便宜...
    2c2z0阅读 2,072评论 0 2
  • ##小程序,大世界 ###简介 · 小程序解决了什么问题 · 小程序技术栈 HTML/CSS/JavaScript...
    玫瑰的lover阅读 333评论 0 0