这篇教程可以应用到纯净版theoneffmpeg也可以引用到高级智能云转码express-ffmpeg-vip上面。如果需要可以自行搭建此分布式架构，负载均衡，或者利用低价高配机器转码，用低配大硬盘高带宽提供播放的一种分布式架构。<h3>原理</h3>mongodb从一开始设计的时候就是利用于分布式架构的一种数据库，其自动生成的OBJECTID是关键，这个ID是5d6de52360e715be825959dd这样的24位英文和数字组成的，这里边拥有的信息有时间戳、有服务器ID，所以这个OBJECTID绝对是独一无二，每一台机器上同一时间生成的也会不一样，这样就不存在ID冲突的情况，于是今天这篇分布式架构的教程就出现了。<h3>截图</h3><img src="https://www.efvcms.com/poster/5f1cf8f443954b256e98720c-1567906325259924945.jpg"><h3>步骤</h3>第一步、在转码机器一到四上安装纯净版theoneffmpeg或者智能云转码express-ffmpeg-vip系统。设置所有的安装目录都一样，例如我这里设置的安装目录都是/www/express-ffmpeg。第二步、在每台转码机器上都下载mc客户端工具，这个工具可以对接亚马逊S3，minio和google云储存。<pre><code>cd /~
wget https://dl.min.io/client/mc/release/linux-amd64/mc
chmod +x mc
./mc --help
</code></pre>第三步、在储存服务器或者是播放服务器上边安装MINIO系统，minio系统是一个分布式的对象储存系统，可以让一台服务器瞬间成为对象储存服务器。 可以直接参照：<a target="_blank" rel="noopener noreferrer nofollow" href="https://zhuanma.co/#/miniodj">https://zhuanma.co/#/miniodj</a>第四步、在转码服务器设置同步进程，自动将所有切片或以后增加的切片同步到储存服务器或者对象储存上。如果没有自建MINIO储存服务器（即第三步），也可以使用亚马逊S3或者是谷歌云储存，也是一样的效果。示例-MinIO云存储 从MinIO服务获得URL、access key和secret key。<pre><code>./mc config host add minio http://192.168.1.51 BKIKJAA5BMMU2RHO6IBB V7f1CwQqAcwo80UEIJEjc5gVQUSSx5ohQ9GSrr12 S3v4
</code></pre>示例-Amazon S3云存储 参考AWS Credentials指南获取你的AccessKeyID和SecretAccessKey。<pre><code>./mc config host add s3 https://s3.amazonaws.com BKIKJAA5BMMU2RHO6IBB V7f1CwQqAcwo80UEIJEjc5gVQUSSx5ohQ9GSrr12 S3v4
</code></pre>示例-Google云存储 参考Google Credentials Guide获取你的AccessKeyID和SecretAccessKey。<pre><code>./mc config host add gcs https://storage.googleapis.com BKIKJAA5BMMU2RHO6IBB V8f1CwQqAcwo80UEIJEjc5gVQUSSx5ohQ9GSrr12 S3v2
</code></pre>在minio储存服务器或者是你的亚马逊S3或者是你的谷歌云储存创建一个桶，比如我创建的就是expressffmpegvip。设置同步目录，并且以后台运行。比如我四台储存服务器都是安装的高级版智能云转码系统，那么切片目录就应该是/www/express-ffmpeg/public/videos。<pre><code>./mc mirror -w --older-than 1h /www/express-ffmpeg/public/videos minio/expressffmpegvip &amp;
</code></pre>上面这命令行的意思是，同步本地/www/express-ffmpeg/public/videos里边的内容，并且持续监听此文件夹里边的变化，自动同步到我的minio储存服务器上面的expressffmpegvip桶中，并且设置了只同步1小时前的内容。为什么设置1小时前，因为如果刚刚切片的内容出现m3u8，则会直接同步到储存服务器，这个时候M3U8里边只有一条TS记录，所以设置一个延迟会让同步更好的进行。至此，多台云转码服务器，对应一台储存或者播放服务器的分布式架构就完成了。

多台云转码服务器，对应一台储存或播放服务器的分布式架构实现

<h3>更新简介</h3>这次这个更新，我进行了长期的思考和设计，最终设计和开发完成，这个积分点播功能是配合试看功能而存在的，需要同时开启试看功能和积分点播功能，在用户登录之后用户组权限不够的时候，提示只能试看1分钟，增加积分购买点播功能，用户购买之后才可以观看完整版，并且从头到尾都是同一个m3u8地址，只是根据用户的用户组情况和积分购买情况来返回不同的内容。<h3>功能更新：</h3>一、新增CMS管理中，是否开启积分购买点播功能，增加了默认视频积分价格，必须同时开启试看功能。（每一部视频也可以自定义自己的积分价格，如果未设置则会使用默认积分价格） 二、试看功能和VIP用户组、积分点播三个功能共同配合，完善了这个积分点播功能： 1、用户未登录时，提醒只能观看一分钟试看，登录之后才能观看完整视频。 2、用户登录时，如果用户组权限不够或者是VIP用户组权限不够，就会提示：您用户组权限不够，只能观看一分钟试看，请升级用户组或者积分购买此视频完整版。 3、如果此视频用户使用积分购买过，那么会直接返回完整视频。 4、如果用户的用户组权限够了，也会直接返回完整视频内容。 5、无论用户如何盗链M3U8，所有非本站CMS都会只显示1分钟试看内容。 6、可自定义每一部视频的单独的积分价格，如果未设置，则会直接使用CMS管理中设置的默认积分价格，免去重复设置之苦。三、后台增加视频简易编辑功能，简易编辑可以设置视频的简单的标题和简介，还有此视频的积分价格，简单的分类标签，除了标题，其他都是选项填，再也不用去编辑中详细编辑视频信息。四、新增了前端压缩组件，前端加载更加快速。五、新制作了aria2对接高级版和纯净版脚本，可下载直链、bt、磁力等，而且下载之后，自动搜索匹配中文字幕并且下载，最后再把视频和字幕自动转移至入库目录，极其方便，只为方便更多用户。优势：用户登录状态，普通用户组状态、VIP用户组状态和积分购买系统共同构成此系统，系统当接收到M3U8请求时，会直接判断当前用户的登录状态，普通用户组权限、VIP用户组权限和此视频的积分购买情况，并且智能返回完全不同的内容，并且同时也防止了M3U8的盗链播放（因为第三方播放，没有用户登录信息，所以会直接返回1分钟试看内容），实在是CMS中积分点播功能的集大成功能。案例：&nbsp;<a target="_blank" rel="noopener noreferrer nofollow" href="https://jiangshi.moejj.com/">moejj僵尸站</a>(积分点播+试看+签到+分类聚合，登录可试用）&nbsp;<a target="_blank" rel="noopener noreferrer nofollow" href="https://www.leimulamu.com/">蕾姆拉姆网</a>（VIP用户组+标签聚合+多分辨率）<h3>截图</h3><img src="https://www.efvcms.com/poster/5f1cf7d843954b256e987205-1566970382830247470.jpg">

2019年8月28日更新：高级版积分点播系统，试看和积分购买点播系统的完美配合

现在大多数声称云转码的系统，其实并没有多少云的功能，其实就是服务端的一个转码软件，真正的云转码应该具备的，那当然是分布式文件系统，无限扩容，智能多线程转码，智能分配转码任务，单机多线程转码技术，无限集群，大集群下可无限小集群，上千台服务器级别的分布式多线程转码系统才能真正称之为云转码。于是，在我长期的研究中，终于发现了一种比较完美的解决方案，那就是：hadoop分布式框架搭建集群和分布式文件系统，利用ffmpeg在分布式文件系统中进行图片水印、跑马灯、多分辨率转码等操作，再利用nodejs智能控制和分配任务，最后再利用mongodb储存分布式系统中的返回的数据。<h3>图示</h3><img src="https://www.efvcms.com/poster/5f1cf71943954b256e987202-1566888654828791856.jpg"><h3>基本的技术详解</h3>hadoop分布式文件系统，可以使用命令行的方式控制整个分布式文件系统上的文件，就跟本地使用常见的命令行一样，这样就可以非常方便的使用命令行，将本地文件上传到分布式文件系统服务器上，或者是从分布式文件系统上拉取文件到本地来。 第一步、上传：视频文件通过nodejs搭建的API系统上传至总控服务器，总控服务器通过分片将其分片成小片段，将小片段通过命令行上传至不同的分布式服务器中。 第二步、转码：分布式系统接受到总控智能分配的分片视频之后，反馈数据到总控服务器，总控服务器发送转码指令到分布式系统中，分布式系统接收到转码指令将分片转码，如果是六台服务器，即是六块分片同时在不同的节点中进行转码。 第三步、返回视频：总控等待所有节点转码完成的数据之后，请求其数据回到本地，将视频进行拼合。 第四步、云储存：将拼合完成的视频通过云储存，同时储存到几台大型储存服务器中，并且提供播放服务。其他技术：单机多线程转码技术，这个技术好处在于节点不够多的时候，如果处理大视频，还可以在节点中将其分片多多个视频片段，然后在单机中多线程处理多个视频片段，极大利用整个cpu性能，最后再合成，并且返回给总控机器。整个系统拥有的优点：分布式系统，可以扩展至上千台服务器，分布式文件系统，通过简单操作就可以实时操控整个文件系统，nodejs总控系统，nodejs完美的性能，可以支撑上千万的并发请求，智能调控分布任务等，ffmpeg最佳的参数，在分片的情况也能做到去水印、添加水印、添加跑马灯等高级操作。

多线程分布式云转码系统方案，hadoop+ffmpeg+nodejs构建真正云转码

<h3>前言</h3>高级版在<code>2019</code>年<code>8</code>月<code>18</code>日又进行了一次小的更新，这次更新了前端<code>CMS</code>相关的功能，增加了首页鼠标移动到电影类的海报上之后，会显示此视频的动态图，达到预览的功能，还增加了视频播放页的指定转码后的<code>MP4</code>的下载功能。<h3>更新</h3>1、增加了动态图海报功能鼠标没移动上去时显示的是静态海报，鼠标移动上去时则会显示动态图海报。2、视频播放页，增加了下载功能下载功能可在后台<code>CMS</code>管理中设置开启，开启之后，需要选择前台提供哪一个分辨率的<code>MP4</code>下载，这个分辨率必须对应转码设置中设置的保留的分辨率转码后的<code>mp4</code>。这个动态图海报功能，估计后面会进化成一段<code>10</code>秒左右的预览视频功能，此功能是截图了整个视频的其中几个片段拼接，并且转码成低分辨率，抽去音频的一段视频。设计上已经完成，就等着我来编码了。<h3>功能截图</h3><img src="https://www.efvcms.com/poster/5f1cf65143954b256e987200-1566121574577751862.jpg"><img src="https://www.efvcms.com/poster/5f1cf44f43954b256e9871fd-1566121599676763836.jpg">

技术博文第9页

多台云转码服务器，对应一台储存或播放服务器的分布式架构实现

2019年8月28日更新：高级版积分点播系统，试看和积分购买点播系统的完美配合

多线程分布式云转码系统方案，hadoop+ffmpeg+nodejs构建真正云转码

高级版GPU云转码2019年8月18日更新：新增MP4下载和gif海报功能

技术博文 第9页

多台云转码服务器，对应一台储存或播放服务器的分布式架构实现

2019年8月28日更新：高级版积分点播系统，试看和积分购买点播系统的完美配合

多线程分布式云转码系统方案，hadoop+ffmpeg+nodejs构建真正云转码

高级版GPU云转码2019年8月18日更新：新增MP4下载和gif海报功能

技术博文第9页