当前位置: 首页 > backend >正文

【音视频】WebRTC-Web 音视频采集与播放

一、打开摄像头

打开摄像头首先需要有一个htmlvideo标签:

  • id = "local-video",是为了后续的js脚本调用这个对象
  • autoplay是设置打开后自动播放,playsinline则是为了兼容移动端
 <video id = "local-video" autoplay playsinline></video>

添加<script>脚本标签:

  • 需要定义一个constraints对象,内部需要设置音频和视频的打开情况,比如这里只打开摄像头,则:
//媒体限制
const constraints = {audio:false,video:true
};
  • 通过documentquerySelector方法,返回对应标签id的对象,比如这里要得到<video>标签,就传入"#local-video",如果要得到对应的<button>标签对象,则查找"#showVideoBtn"
const video = document.querySelector("#local-video");
document.querySelector("#showVideoBtn").addEventListener("click",onOpenCamera);
  • 要在点击按钮后,打开摄像头,我们要实现下面三个回调函数:

handleSucess

function handleSuccess(stream){//document是内置全局变量,表示当前HTML文档,这里是选择对应的video对象const video = document.querySelector("#local-video"); //#local-video选择对应的id,返回的是引用video.srcObject = stream; //把视频流赋值给video对象
}function handleError(error){//console是内置全局变量,表示浏览器端的控制台console.error("getUserMedia error:" + error); //控制台打印错误
}

这个函数在打开摄像头成功之后调用,会传入一个stream对象,表示对应的媒体流,我们在这个回调函数中要将媒体流传入上述<video>标签对象,具体的方法是赋值<video>对象的srcObject属性:

video.srcObject = stream;

handleError

function handleError(error){//console是内置全局变量,表示浏览器端的控制台console.error("getUserMedia error:" + error); //控制台打印错误
}

这个函数用于打开摄像头失败之后的回调函数,传入错误信息,我们可以在控制台打印对应的信息:

onOpenCamera

 function onOpenCamera(e){//navigator也是内置全局变量,表示导航对象//mediaDevice是对应的媒体设备对象//getUserMedia是获取用户媒体的方法,返回一个Promise对象,promise执行成功后调用then函数,失败触发catch函数navigator.mediaDevices.getUserMedia(constraints).then(handleSuccess).catch(handleError);}

这个函数在我们按钮点击后触发,是按钮点击的事件回调函数,传入一个事件对象,我们可以在这个事件回调函数内部调用navigator对象的mediaDevices.getUserMedia方法,也就是先获得媒体设备,然后在将我们的媒体限制、回调函数绑定,具体如下:

  • getUserMedia函数返回一个promise对象,这个对象执行完打开摄像头任务后,会调用对应的函数
    • 如果任务成功,调用then里面的回调函数
    • 如果任务错误,调用catch里面的回调函数
navigator.mediaDevices.getUserMedia(constraints).then(handleSuccess).catch(handleError);

最后,我们需要将按钮的点击事件回调函数绑定在showVideoBtn

document.querySelector("#showVideoBtn").addEventListener("click",onOpenCamera);

完整代码如下:

<!DOCTYPE html><html> <body><video id = "local-video" autoplay playsinline></video><button id = "showVideoBtn"> 打开摄像头</button><p>通过getUserMedia获取视频</p></body><script>//媒体限制const constraints = {audio:false,video:true};function handleSuccess(stream){//document是内置全局变量,表示当前HTML文档,这里是选择对应的video对象const video = document.querySelector("#local-video"); //#local-video选择对应的id,返回的是引用video.srcObject = stream; //把视频流赋值给video对象}function handleError(error){//console是内置全局变量,表示浏览器端的控制台console.error("getUserMedia error:" + error); //控制台打印错误}function onOpenCamera(e){//navigator也是内置全局变量,表示导航对象//mediaDevice是对应的媒体设备对象//getUserMedia是获取用户媒体的方法,返回一个Promise对象,promise执行成功后调用then函数,失败触发catch函数navigator.mediaDevices.getUserMedia(constraints).then(handleSuccess).catch(handleError);}//绑定按钮的点击事件,点击后调用onOpenCamera函数document.querySelector("#showVideoBtn").addEventListener("click",onOpenCamera);</script></html>

Web页面效果如下:

在这里插入图片描述

二、打开麦克风

打开麦克风和打开摄像头类似,把对应的<video>标签改为audio标签,然后添加上controls模块,这个模块是添加一些暂停、声音调节等功能

<audio id = "local-audio" autoplay controls></audio>

还需要要修改对应的媒体限制对象constraints,关闭video,打开audio

const constraints = {video: false,audio: true
}

其他部分和打开摄像头保持一致

<!DOCTYPE html>
<html><body><audio id = "local-audio" autoplay controls></audio><button id = "showAudioBtn"> 打开麦克风</button><p>通过getUserMedia获取音频</p></body><!--类似video部分的js脚本--><script>const constraints = {video: false,audio: true}function handleSuccess(stream){const audio = document.querySelector("#local-audio");audio.srcObject = stream;}function handleError(error){console.error("getUserMedia error" + error);}function onOpenMicrophone(e){navigator.mediaDevices.getUserMedia(constraints).then(handleSuccess).catch(handleError);}showAudioBtn = document.querySelector("#showAudioBtn");showAudioBtn.addEventListener("click",onOpenMicrophone);</script></html>

Web页面效果如下:

在这里插入图片描述

三、同时打开摄像头和麦克风

同时打开摄像头和麦克风,和打开摄像头一致,唯一需要修改的就是媒体限制对象constraints,将视频和音频都设置为true

const constraints = {video: true,audio: true
}

完整代码如下:

<!DOCTYPE html><html><body><video id = "local-video" autoplay playsinline></video><button id = "showVideoAudioBtn"> 打开摄像头和麦克风</button><p>通过getUserMedia获取摄像头和麦克风</p></body><script>const constraints = {video: true,audio: true}function handleSuccess(stream){const video = document.querySelector("#local-video");video.srcObject = stream;}function handleError(error){console.error("getUserMedia error" + error);}function onOpenVideo_Audio (e){navigator.mediaDevices.getUserMedia(constraints).then(handleSuccess).catch(handleError);}showVideoBtn = document.querySelector("#showVideoAudioBtn");showVideoBtn.addEventListener("click",onOpenVideo_Audio);</script></html>

在这里插入图片描述

更多资料:https://github.com/0voice

http://www.xdnf.cn/news/16599.html

相关文章:

  • 如何利用 Redis 的原子操作(INCR, DECR)实现分布式计数器?
  • CSS-in-JS 动态主题切换与首屏渲染优化
  • IBM Watsonx BI:AI赋能的下一代商业智能平台
  • 领域驱动设计(DDD)在分布式系统中的架构实践
  • jenkins连接docker失败【还是没解决】
  • 基于SpringBoot+MyBatis+MySQL+VUE实现的便利店信息管理系统(附源码+数据库+毕业论文+远程部署)
  • 计算机网络基础(一) --- (网络通信三要素)
  • 【C++算法】77.优先级队列_数据流的中位数
  • PHP云原生架构:容器化、Kubernetes与Serverless实践
  • 机器学习笔记(四)——聚类算法KNN、Kmeans、Dbscan
  • 深入理解 Qt 元对象系统 (Meta-Object System)
  • 架构实战——互联网架构模板(“用户层”和“业务层”技术)
  • 【Linux系统编程】Ext2文件系统
  • 【C++】指针
  • 【面试场景题】阿里云子账号设计
  • 【数据结构】用堆实现排序
  • JavaWeb 入门:JavaScript 基础与实战详解(Java 开发者视角)
  • 「源力觉醒 创作者计划」_文心大模型 4.5 多模态实测:开源加速 AI 普惠落地
  • 某雷限制解除:轻松获取原始下载链接,支持多任务转换
  • Hyperchain安全与隐私机制详解
  • Android Slices:让应用功能在系统级交互中触手可及
  • ElasticSearch 的3种数据迁移方案
  • RabbitMQ 消息持久化的三大支柱 (With Spring Boot)
  • 深度学习篇---百度AI Studio模型
  • JSON-RPC 2.0 规范
  • JVM知识点(2)
  • 二维经验模态分解(BEMD)算法详解与MATLAB实现
  • Python 程序设计讲义(28):字符串的用法——格式化字符串:format()方法
  • Spring Boot with RabbitMQ:四大核心模式指南
  • python-网络编程