webrtc开源项目,可以用WebRTC来做视频直播吗？
webrtc开源项目,可以用WebRTC来做视频直播吗？详细介绍
本文目录一览： WebRTC简介（一）
WebRTC（Web Real-Time Communication）也被称为网络实时通信，是由 Google、Mozilla 和其他公司推动的一个开源项目，它通过 Javascript API 实现无插件的实时通信，以及在不需要中介的情况下在浏览器之间交换任意数据。
WebRTC的优点：
WebRTC技术的诞生，有一个很重要的原因在于，在浏览器实现实时音视频通话，需要依赖相关插件或程序，而插件安全漏洞问题则更为关键。浏览器开发人员无法控制这些插件以及更新，因此插件带来的安全风险也相对较大。
在WebRTC诞生之前，开发实时音视频应用的成本是非常高，需要考虑的技术问题很多，如音视频的编解码，数据传输延时、丢包、网络抖动、回音处理和消除等，如果要兼容浏览器端的实时音视频通信，还需要额外安装插件。当然，可以考虑使用第三方成熟技术，比如当时世界顶级的互联网音视频方案GIPS(Global IP Solutions)，支付相应的费用就行。很多知名的应用或者软件服务商也都在用GIPS，如Yahoo，AOL，IBM，SKYPE，QQ等。
WebRTC项目的愿景：实时通信web化，让WebRTC成为互联网音视频实时通信的规范，让开发者基于此规范快速开发出安全、可靠的应用。未来的音视频实时通信，必定是现代化生产活动中极其重要的板块。以下是WebRTC的部分应用场景：
两个不同网络环境的（具备摄像头/麦克风多媒体设备的）客户端（浏览器或APP），要实现点对点的实时音视频对话，难点在哪里？
要实现P2P通信，首先需要了解彼此是否都支持相同的媒体能力，WebRTC默认使用V8编解码器，如果要连接的对方不支持V8解码，如果没有媒体协商过程。那么即使连接成功，把视频数据发给对方，对方也无法播放
比如：Peer-A端可支持VP8、H264多种编码格式，而Peer-B端支持VP9、H264，要保证二端都正确的编解码，最简单的办法就是取它们的交集H264
有一个专门的协议 ，称为Session Description Protocol (SDP)，可用于描述上述这类信息，在WebRTC中，参与视频通讯的双方必须先交换SDP信息，这样双方才能知根知底，而交换SDP的过程，也称为"媒体协商"。
交换数据会通过一个中间服务来完成，在这里，我们称之为信令服务器
在建立P2P连接时，需要交换的信息有：
最理想的场景
然而，在大多数情况下，两个对等端都是各自处于某个局域网之中，相互之间隔着NAT与防火墙
NAT(Network Address Translation)即为网路地址转换协议
局域网-->公网
公网-->局域网
可以借助STUN服务器.，穿越NAT
在NAT四种主要类型中有三种是可以使用STUN穿透：完全圆锥型NAT、受限圆锥型NAT和端口受限圆锥型NAT。但大型公司网络中经常采用的对称型 NAT（又称为双向NAT）则不能使用STUN穿透，这类路由器会透过 NAT 布署所谓的「Symmetric NAT」限制。也就是说，路由器只会接受之前连线过的节点所建立的连线。
可以点对点连接的情况与需要中转的情况（数据来源于Google）
不过在国内大部分局域网无法穿越。
google为什么要开源webrtc
google开源了WebRTC项目，网址是：http://code.google.com/p/webrtc/。
WebRTC实现了基于网页的视频会议，标准是WHATWG 协议，目的是通过浏览器提供简单的javascript就可以达到实时通讯（Real-Time Communications (RTC)）能力。
通过对源码的粗略分析，WebRTC提供了视频会议的核心技术，包括音视频的采集、编解码、网络传输、显示等功能，并且还支持跨平台：windows，linux，mac，android。
WebRTC的视频处理分析（windows平台）
WebRTC的视频部分，包含采集、编解码(I420/VP8)、加密、媒体文件、图像处理、显示、网络传输与流控(RTP/RTCP)等功能。
视频采集---video_capture
源代码在webrtc\modules\video_capture\main目录下，包含接口和各个平台的源代码。
在windows平台上，WebRTC采用的是dshow技术，来实现枚举视频的设备信息和视频数据的采集，这意味着可以支持大多数的视频采集设备；对那些需要单独驱动程序的视频采集卡（比如海康高清卡）就无能为力了。
视频采集支持多种媒体类型，比如I420、YUY2、RGB、UYUY等，并可以进行帧大小和帧率控制。
视频编解码---video_coding
源代码在webrtc\modules\video_coding目录下。
WebRTC采用I420/VP8编解码技术。VP8是google收购ON2后的开源实现，并且也用在WebM项目中。VP8能以更少的数据提供更高质量的视频，特别适合视频会议这样的需求。
视频加密--video_engine_encryption
视频加密是WebRTC的video_engine一部分，相当于视频应用层面的功能，给点对点的视频双方提供了数据上的安全保证，可以防止在Web上视频数据的泄漏。
视频加密在发送端和接收端进行加解密视频数据，密钥由视频双方协商，代价是会影响视频数据处理的性能；也可以不使用视频加密功能，这样在性能上会好些。
视频加密的数据源可能是原始的数据流，也可能是编码后的数据流。估计是编码后的数据流，这样加密代价会小一些，需要进一步研究。
视频媒体文件--media_file
源代码在webrtc\modules\media_file目录下。
该功能是可以用本地文件作为视频源，有点类似虚拟摄像头的功能；支持的格式有Avi。
另外，WebRTC还可以录制音视频到本地文件，比较实用的功能。
视频图像处理--video_processing
源代码在webrtc\modules\video_processing目录下。
视频图像处理针对每一帧的图像进行处理，包括明暗度检测、颜色增强、降噪处理等功能，用来提升视频质量。
视频显示--video_render
源代码在webrtc\modules\video_render目录下。
在windows平台，WebRTC采用direct3d9和directdraw的方式来显示视频，只能这样，必须这样。
网络传输与流控
对于网络视频来讲，数据的传输与控制是核心价值。WebRTC采用的是成熟的RTP/RTCP技术。
WebRTC的音频处理分析（windows平台）
WebRTC的音频部分，包含设备、编解码(iLIBC/iSAC/G722/PCM16/RED/AVT、NetEQ)、加密、声音文件、声音处理、声音输出、音量控制、音视频同步、网络传输与流控(RTP/RTCP)等功能。
音频设备---audio_device
源代码在webrtc\modules\audio_device\main目录下，包含接口和各个平台的源代码。
在windows平台上，WebRTC采用的是Windows Core Audio和Windows Wave技术来管理音频设备，还提供了一个混音管理器。
利用音频设备，可以实现声音输出，音量控制等功能。
音频编解码---audio_coding
源代码在webrtc\modules\audio_coding目录下。
WebRTC采用iLIBC/iSAC/G722/PCM16/RED/AVT编解码技术。
WebRTC还提供NetEQ功能---抖动缓冲器及丢包补偿模块，能够提高音质，并把延迟减至最小。
另外一个核心功能是基于语音会议的混音处理。
声音加密--voice_engine_encryption
和视频一样，WebRTC也提供声音加密功能。
声音文件
该功能是可以用本地文件作为音频源，支持的格式有Pcm和Wav。
同样，WebRTC也可以录制音频到本地文件。
声音处理--audio_processing
源代码在webrtc\modules\audio_processing目录下。
声音处理针对音频数据进行处理，包括回声消除(AEC)、AECM、自动增益(AGC)、降噪处理等功能，用来提升声音质量。
网络传输与流控
和视频一样，WebRTC采用的是成熟的RTP/RTCP技术。
WebRTC的官网是http://www.webrtc.org/，其中的FAQ解答了很多大家关心的问题。有这么几点可以关注：
1.license
采用BSD licenses，可以用于商业软件；即使你修改了源代码，也不必公开你修改的部分。
2.为什么WebRTC要免费
音视频针对目前的互联网应用，还是至关重要的。google这样做的目的，无非是吸引大量的开发者在chrome平台上开发音视频相关应用，和当年微软windows集成IE是一个道理。
3.下载和编译
a).下载google的源码工具depot_tools：
svn co http://src.chromium.org/svn/trunk/tools/depot_tools
并把depot_tools添加到系统的环境变量PATH里；
b).下载git工具：并把git添加到系统的环境变量PATH里；
c).创建webrtc工作目录，并在该目录下运行：
gclient config https://webrtc.googlecode.com/svn/trunk
gclient sync --force
sync命令也会产生基于本地环境(Linux:make, OSX: XCode, Windows: Visual Studio)的build文件。
也可以用命令：
gclient runhooks --force
对windows平台，在trunk目录下，已经有针对Visual Studio的工程文件：
webrtc.sln
好了，打开它，这就可以编译了。
注：webrtc默认使用了C:\Program Files\Microsoft SDKs\Windows\v7.1\Samples\multimedia\directshow\baseclasses。我的机器上只有v7.0的sdk，于是构造了一个v7.1的目录，仅包含Samples\multimedia\directshow\baseclasses。
google开源webrtc的理由如下：【点击免费试用，0成本启动】WebRTC(Web Real-Time Communication)项目的最终目的主要是让Web开发者能够基于浏览器(Chrome\FireFox\...)轻易快捷开发出丰富的实时多媒体应用，而无需下载安装任何插件，Web开发者也无需关注多媒体的数字信号处理过程，只需编写简单的Javascript程序即可实现，W3C等组织正在制定Javascript 标准API，目前是WebRTC 1.0版本，Draft状态;另外WebRTC还希望能够建立一个多互联网浏览器间健壮的实时通信的平台，形成开发者与浏览器厂商良好的生态环境。同时，Google也希望和致力于让WebRTC的技术成为HTML5标准之一，可见Google布局之深远。想要了解更多关于webrtc的相关信息，推荐咨询ZEGO即构科技。公司自成立伊始，就专注自研音视频引擎，在音频前处理、网络自适应和跨平台兼容性等方面，达到国际一流水平，同时充分利用基础云服务商的能力，构建了MSDN海量有序自学习数据网络，服务覆盖全球，涵盖上百个音视频互动业务场景，单日时长突破30亿分钟。
webrtc是什么
WebRTC是网页即时通信的缩写，该程序可以允许用户在网页中进行实时语音通话以及视频通话，如果按照专业的介绍来说，WebRTC是一个音视频处理+即时通讯的开源库。
WebRTC的特点：开源的框架非常大，可以跨平台使用，也可以在浏览器中使用，传输具有时效性以及可以进行音频和视频通话。
WebRTC可以应用的场景：音视频会议、在线教育、照相机、音乐播放器、共享远程桌面、录制、即时通讯工具、P2P网络加速、文件传输工具、游戏以及实时人脸识别。
电脑使用技巧：电脑存放时需要注意的事项：1.关机前笔记本电池应当充满电，关机后取下电源适配器和电池，并分别存放，防止电池两电极短路发热起火，同时也要远离有火源的地方。
2、可以使用塑料密封袋包装，有干燥剂最好放进去，放置于干燥的地方保存。
3、存放时需要单独放置，不能在电脑上方放置其它物品，特别是比较重的物品，放置比较重的物品有可能会损坏电脑屏幕。
webrtc开源项目哪家做得比较好？
webrtc 本身就是开源，但入门门槛较高，GitHub 有不少开源项目可以学习。当然如果要用 webrtc来做企业级音视频互动项目，建议还是用第三方专业的音视频服务厂商。深圳ZEGO即构科技这家就做得还不错，为全球提供稳定高质的实时音视频服务，强大的自研底层引擎，为泛娱乐、在线教育、金融、医疗、物联网等多行业客户提供高质量的音视频互动技术。
有没有比较成熟的webrtc开源可以介绍？
WebRTC目前已经比较成熟了，相应的开源项目也比较多。像深圳即构科技的webrtc就不错，可以了解学习下，提供灵活易用的WebRTC-SDK，四行代码，30分钟在应用内构建语音通话、视频通话、互动直播等实时互动场景，支持互动白板、屏幕共享、文件共享、实时消息等常用功能。
可以用WebRTC来做视频直播吗？
首先看一下什么是WebRTC，
那么我们这次将介绍的WebRTC在流媒体传输，就是采用了在RTP/RTCP协议基础上的安全协议SRTP/SRTCP。这里可能有人会问，WebRTC究竟是什么呢？ WebRTC是一个Google免费开源的项目，其目的是为浏览器和移动应用程序提供实时通信（RTC）功能。可以理解为，WebRTC就是一套浏览器的JavaScript API，通过这套API,可以开创性地快速实现浏览器之间的实时音视频通讯，数据传输功能。
WebRTC核心API
MediaStream: 从客户摄像头或麦克风获取的媒体流对象。
RTCPeerConnection: 连接对象，用于连接建立，媒体流传输。
RTCDataChannel: 数据传输通道。
WebRTC的API不仅仅是给你获取本地信源的，所谓RTC是real time communication的缩写，自然这套API是带传输功能的。所以获取图像信源之后不应该用websocket发送图像数据，而是直接用WebRTC的通信相关API发送图像和声音（这套API是同时支持图像和声音的）数据。
WebRTC是免费的，而且音视频的采集、编解码、网络传输、显示等功能，都提供了，很诱人。但是，WebRTC的编码器较弱、网络适应能力差，只支持8人以内的音视频会议。而且WebRTC的传输是基于公共互联网，传输质量不能保证。如果使用了WebRTC，就会遇上层出不穷的问题。同时，WebRTC主要面向Web应用，跨平台支持很差。所以，靠WebRTC来开发一个直播平台，几乎是不可能完成的任务。
网上一篇介绍WebRTC的科普文中有一句话说到，“demo和实用之间还差着一万个WebRTC”，额，古人诚不我欺。
基于开源WebRTC开发实时音视频靠谱吗
WebRTC是一个支持网页浏览器进行实时语音对话或视频对话的技术，在行业内得到了广泛的支持和应用，成为下一代视频通话的标准，所以来说还是靠谱的。
话说回来，虽然作为实时音视频领域最火的开源技术，WebRTC 点对点的架构模式却无法支持大规模并发，怎么解决呢？即构自研WebRTC网关服务器架构实践就很好解决了这个问题。
Zego-Gateway架构的改进
在加入WebRTC网关之前，即构自研系统架构如下图所示，主要分成两部分，左边是低延时用户，而右边是围观用户。低延时用户主要是通过ZEGO的实时传输网络进行推拉流。
由于RTMP的实时性并不是很好，在浏览器端没有办法通过RTMP进行上行传输达到低延时的特点，所以即构对原有的系统架构进行了升级，在低延时的实时传输网络中加入了WebRTC网关服务器，具体如下图所示。
在加入了WebRTC网关服务器后（图中红线部分所示），即构的系统已经能全面支持网页端视频互动场景，同时实现了APP、微信小程序、WebRTC三端的连麦互通。
使用webrtc js可以实现互动直播吗？
使用WebRTC和JavaScript可以实现互动直播。WebRTC是一个开放源代码的项目，可以使Web浏览器和移动应用程序之间实现实时通信（RTC）功能，如视频和音频聊天、数据共享和P2P文件传输等。通过WebRTC，您可以在Web浏览器中实现高质量的实时视频流，因此可以很好地支持互动直播。
实现WebRTC互动直播需要使用一些JavaScript库和框架，如MediaStream API、RTCPeerConnection、WebSockets和Node.js等。具体的实现过程可能会涉及到一些复杂的技术细节，但是有许多现成的解决方案和教程可以帮助您开始使用WebRTC实现互动直播。
例如，可以使用开源的WebRTC流媒体服务器，如Kurento或Jitsi，或使用现成的云服务提供商，如Twilio或Agora，这些服务可以帮助您快速地构建和部署基于WebRTC的互动直播应用程序。
webrtc.js 是什么
就是通过webrtc协议在网页上播放视频的一个js库，在视频监控方面用的比较多。
WebRTC是一个由Google发起的实时通讯解决方案，其中包含视频音频采集，编解码，数据传输，音视频展示等功能，可以通过技术快速地构建出一个音视频通讯应用。 虽然其名为WebRTC，但是实际上它不光支持Web之间的音视频通讯，还支持Android以及IOS端，此外由于该项目是开源的，我们也可以通过编译C++代码，从而达到全平台的互通。【点击免费试用，0成本启动】对于开发人员来说，WebRTC就是一组API。经常有人说WebRTC是JavaScript API的媒体引擎，准确说WebRTC是一个带有JavaScript API的媒体引擎。但这并不是全部。WebRTC并不止仅限于JavaScript。有很多系统是用C，Java，Python，C#，Erlang，Dart，甚至PHP所写。在移动端，原生软件在其客户端WebRTC SDK实现中使用的是Objective-C，Swift或者Java。但是最主要的是JavaScript。想要了解更多关于webrtc的相关信息，推荐咨询ZEGO即构科技。即构科技有限公司是为开发者提供高品质实时音视频、实时语音、互动直播和IM即时通讯等服务的公司。核心团队成员均来自QQ，有超过20年的互联网和音视频技术开发经验，以及亿量级海内外用户运营服务能力。专注于实时音视频领域，致力提供全世界范围内最清晰稳定实时的语音视频服务，已服务4000+企业，适用于游戏、娱乐社交、在线教育、在线医疗、远程会议、智能硬件等多种用户场景。
WebRTC技术专题（1）【未来可期，WebRTC的诞生发展的概述介绍】
本系列内容将和大家一起来探讨和介绍的目的是：
以及声网 Agora是怎样基于 WebRTC 进行二次开发，又将如何支持 WebRTC NV 版本的？
此外，“WebRTC 在不同场景下包含不同的含义，它既可以代表 Google 开源的 WebRTC 项目 ，又可以代表 W3C（World Wide Web Consortium-万维网联盟） 工作组制定的 WebRTC 标准 ，也可以代表浏览器中的 WebRTC 接口 ，我们将他们统称为 WebRTC技术。”
至此，WebRTC的使用已经超越了最初的核心设计，即在浏览器和其他生态（例如本地应用）中支持视频会议和协作系统 。现在需要更多的特性和优化。
WebRTC的使命是使丰富、高质量的RTC应用程序能够为浏览器、移动平台和 IoT设备开发，并允许所有人通过一组通用协议进行通信。
由于WebRTC并非是一个插件，也不用安装别的插件，因此所有应用都可以在浏览器的沙箱中运行，并不用再额外创建新进程。
W3C WebRTC工作组已经开始研究 WebRTC Next Version Use Cases，规划 WebRTC 的未来，特别是：