阿里云最新上云解决方案：视频网站的存储与媒体处理解决方案
视频存储与处理服务解决方案是基于阿里云服务提供高可靠存储和实时自动化服务的一种视频存储和处理解决方案。根据企业业务需求，支持视频存储、水印、转码、点播等能力。帮助您优化和增强视频网站能力，为客户提供高质量的视频服务，体验本方案预计费用约为5元。https://upload-images.jianshu.io/upload_images/19316870-b3921bdfe71ca546.png
<h2>一、方案介绍</h2>
<h3>视频网站的存储与媒体处理方案</h3>
本方案通过视频点播VOD、消息服务MNS、函数计算FC、对象存储OSS、云服务器ECS实现视频上传、处理和存储服务。
https://upload-images.jianshu.io/upload_images/19316870-84baa2f75d9cc00d.png
[*]
解决问题1：视频处理效率低
通过使用视频点播VOD、消息服务MNS、函数计算FC，实现自动化的视频处理，从而提高视频的处理效率。
[*]
解决问题2：视频存储成本高
通过使用低成本的对象存储OSS，实现对上传的视频的存储和管理，从而降低视频的存储成本。
[*]
解决问题3：视频上传性能低
通过使用云服务器ECS和负载均衡ALB，实现视频上传服务的弹性和高性能，从而提高了视频上传性能。
<h3>方案优势</h3>
1.高效稳定
基于云计算和大数据技术，可以实现快速、可靠的视频存储、处理、传输和分发，保证视频服务的高质量和高可用性。
2.弹性扩展
可以根据客户需求实现对视频存储、处理、传输和分发等各个环节的灵活配置和扩展，从而有效降低成本，提高服务效率。
3.安全可靠
提供数据安全、网络安全、系统安全等多个层面的保障，可以有效防范各类安全风险和威胁，保护用户数据的安全和隐私。
<h3>应用场景</h3>
1.视频数据管理
视频点播应用于视频管理场景：上传、存储、转码、加密、发布、管理，全面管理视频生命周期，满足不同需求。
2.视频自动化处理
视频点播、函数计算、消息服务，结合实现视频自动化处理：上传视频，触发转码、审核任务，保存视频、发送通知，提高处理效率和质量。
3.视频数据冷热分层
通过将视频数据按照热度分成不同层次，并采用不同的OSS存储策略和技术手段，可以更加有效地管理数据，降低存储成本，提高数据利用效果。
<h2>二、视频网站的存储与媒体处理方案解决方案部署教程</h2>
部署流程简介：
1.部署准备
完成账号申请、账号充值、RAM用户创建和授权。
2.规划网络和资源
根据云上架构要求，规划博客网站的网络和资源。
3.部署操作
部署视频网站架构所需的云服务。
4.配置视频网站服务
使用部署的云服务配置视频网站服务。
5.完成及清理
提供验证方案是否部署成功的步骤。
<h3>方案概览</h3>
视频存储与处理是指基于阿里云服务提供高可靠存储和实时自动化服务，能够满足用户对视频存储、转码、截图、播放、直播等功能的需求。本技术解决方案以搭建一个视频存储和处理服务为例，为您演示：
[*]如何搭建一个视频存储和处理服务。
[*]观察添加水印后的视频。
<h5>方案架构</h5>
方案提供的默认设置完成部署后在阿里云上搭建的网站运行环境如下图所示。实际部署时您可以根据资源规划修改部分设置，但最终形成的运行环境与下图相似。
<div class="image-view" data-height="1020" data-width="1520"><img data-original-filesize="193658" data-original-format="image/jpeg" data-original-height="1020" data-original-src="https://upload-images.jianshu.io/upload_images/19316870-9ef366e76fad4a52.jpeg" data-original-width="1520"/>
本方案的技术架构包括以下基础设施和云服务：
[*]2个云服务器ECS：部署上传和下载视频网站服务。
[*]1个负载均衡ALB：对外提供访问并将用户请求分配到不同云服务器ECS上的博客网站服务。
[*]1个专有网络VPC：为应用型负载均衡ALB、云服务器ECS等云资源形成云上私有网络。
[*]2台交换机：将2台云服务器ECS连接在同一网络上，实现它们之间的通信，并提供基本的网络分段和隔离功能。
[*]视频点播VOD：将客户端上传视频的消息推送到MNS。
[*]消息服务MNS：接收VOD推送的消息并将其发送给FC。
[*]函数计算FC：收到客户端上传视频的消息后，调用函数从Bucket中获取视频并处理，然后将其上传到另一个Bucket。
[*]对象存储OSS：1个Bucket作为视频点播服务的存储服务，用于存储客户端上传的视频，另1个Bucket用于存储处理后的视频。
[*]1个RAM角色：为视频上传服务授予临时获取STS访问凭证的权限。
<h3>部署准备</h3>
开始部署前，请按以下指引完成账号申请、账号充值、RAM用户创建和授权。
<h5>准备账号</h5>
1.如果您还没有阿里云账号，请访问阿里云账号注册页面，根据页面提示完成注册。阿里云账号是您使用云资源的付费实体，因此是部署方案的必要前提。
2.开通以下云服务：MNS、OSS、VOD、FC、EventBridge。
3.一键授予VOD访问您在其他云产品中的资源的权限。
4.为阿里云账号充值。
[*]为节省成本，本方案默认全部选择使用按量付费资源，使用按量付费资源需要确保账户余额不小于100元。
[*]完成本方案的部署及体验，预计产生费用不超过5元（假设您选择最低规格资源，且资源运行时间不超过30分钟。实际情况中可能部分实例无法购买需要根据实际情况调整资源规格，同时因您操作过程中实际使用的流量差异，会导致费用有所变化，请以控制台显示的实际报价以及最终账单为准）。
<table>
<thead>
<tr>
<th>产品</th>
<th>费用来源</th>
<th>规格</th>
<th>地域</th>
<th>预估费用参考</th>
</tr>
</thead>
<tbody>
<tr>
<td>应用型负载均衡ALB</td>
<td>ALB实例费</td>
<td>基础版</td>
<td>华东2（上海）</td>
<td>0.042元/时</td>
</tr>
<tr>
<td>应用型负载均衡ALB</td>
<td>ALB容量费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.042元/LCU</td>
</tr>
<tr>
<td>云服务器ECS</td>
<td>ECS1配置费</td>
<td>实例：ecs.c7.large （按量付费，2 vCPU 4 GiB）系统盘：cloud_efficiency 40GiB</td>
<td>华东2（上海）</td>
<td>0.450元/时</td>
</tr>
<tr>
<td>云服务器ECS</td>
<td>ECS2配置费</td>
<td>实例：ecs.c7.large （按量付费，2 vCPU 4 GiB）系统盘：cloud_efficiency 40GiB</td>
<td>华东2（上海）</td>
<td>0.450元/时</td>
</tr>
<tr>
<td>消息服务MNS</td>
<td>Queue占用费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.5元/日</td>
</tr>
<tr>
<td>消息服务MNS</td>
<td>API请求次数费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>2.0元/百万次</td>
</tr>
<tr>
<td>对象存储OSS</td>
<td>标准存储（本地冗余）容量（Storage）费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.12元/GB/月</td>
</tr>
<tr>
<td>对象存储OSS</td>
<td>PUT类或GET类请求费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.01元/万次</td>
</tr>
<tr>
<td>函数计算FC</td>
<td>函数调用次数费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.01元/万次</td>
</tr>
<tr>
<td>函数计算FC</td>
<td>GPU使用量费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.0007元/GB*秒</td>
</tr>
<tr>
<td>函数计算FC</td>
<td>活跃vCPU使用量费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.000127元/vCPU*秒</td>
</tr>
<tr>
<td>函数计算FC</td>
<td>内存使用量费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.0000127元/GB*秒</td>
</tr>
<tr>
<td>函数计算FC</td>
<td>公网出流量费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.50元/GB</td>
</tr>
<tr>
<td>视频点播VOD</td>
<td>媒资管理费</td>
<td>-</td>
<td>华东2（上海）</td>
<td>0.12元/GB/月</td>
</tr>
</tbody>
</table>
5.阿里云账号拥有操作所有资源的最高权限，为了安全起见，建议您使用RAM用户。RAM用户需要获得相关权限才能完成方案部署，详情如下：
[*]涉及的云服务：视频点播服务VOD、消息服务MNS、函数计算FC、对象存储OSS、对象存储OSS、云服务器ECS、访问控制RAM、负载均衡SLB、专有网络VPC、资源编排服务ROS、运维编排服务OOS、配额Quotas、访问控制RAM、标签服务TAG。
[*]权限策略参考：
<table>
<thead>
<tr>
<th>云服务</th>
<th>需要的权限</th>
<th>描述</th>
</tr>
</thead>
<tbody>
<tr>
<td>视频点播服务VOD</td>
<td>AliyunVODFullAccess</td>
<td>管理视频点播服务VOD的权限</td>
</tr>
<tr>
<td>消息服务MNS</td>
<td>AliyunMNSFullAccess</td>
<td>管理消息服务MNS的权限</td>
</tr>
<tr>
<td>函数计算FC</td>
<td>AliyunFCFullAccess</td>
<td>管理函数计算FC的权限</td>
</tr>
<tr>
<td>对象存储OSS</td>
<td>AliyunOSSFullAccess</td>
<td>管理对象存储OSS的权限</td>
</tr>
<tr>
<td>云服务器ECS</td>
<td>AliyunECSFullAccess</td>
<td>管理云服务器ECS的权限</td>
</tr>
<tr>
<td>访问控制RAM</td>
<td>AliyunRAMFullAccess</td>
<td>管理访问控制台RAM的权限</td>
</tr>
<tr>
<td>负载均衡SLB</td>
<td>AliyunSLBFullAccess</td>
<td>管理负载均衡ALB的权限</td>
</tr>
<tr>
<td>专有网络VPC</td>
<td>AliyunVPCFullAccess</td>
<td>管理专有网络VPC的权限</td>
</tr>
<tr>
<td>资源编排服务ROS</td>
<td>AliyunROSFullAccess</td>
<td>管理资源编排服务ROS的权限</td>
</tr>
<tr>
<td>运维编排服务OOS</td>
<td>AliyunOOSFullAccess</td>
<td>管理运维编排服务OOS的权限</td>
</tr>
<tr>
<td>配额Quotas</td>
<td>AliyunQuotasFullAccess</td>
<td>管理配额Quotas的权限</td>
</tr>
<tr>
<td>访问控制RAM</td>
<td>AliyunRAMFullAccess</td>
<td>管理访问控制RAM的权限，即管理用户以及授权的权限</td>
</tr>
<tr>
<td>标签服务TAG</td>
<td>AliyunTagManagerAccess</td>
<td>管理标签服务TAG的权限</td>
</tr>
</tbody>
</table>
<h3>一键部署</h3>
一键部署基于阿里云资源编排服务ROS（Resource Orchestration Service）实现，ROS模板已定义好脚本，可自动化地完成云资源的创建和配置，提高资源的创建和部署效率。ROS模板完成的内容包括：
<h5>操作步骤</h5>
您可以通过下方提供的ROS一键部署链接，来自动化地完成这些资源的创建和配置：
[*]创建2个云服务器ECS。
[*]创建1个负载均衡ALB。
[*]创建1个专有网络VPC。
[*]创建2台交换机。
[*]创建1个视频点播VOD。
[*]创建1个消息服务MNS队列。
[*]创建1个函数计算FC服务。
[*]创建2个对象存储OSS Bucket。
[*]创建1个RAM角色。
1.一键部署资源。
[*]单击一键部署，并选择地域。为避免因地域不支持云服务而导致部署失败，建议您参考本方案选择华东2（上海）地域进行部署测试。实际部署生产时，请确保您选择的地域已支持以上云服务。
[*]在配置模板参数页面修改资源栈名称，配置ECS实例、OSS Bucket。填写完所有必选信息并确认后单击创建开始一键配置。
[*]当资源栈信息页面的状态显示为创建成功时表示一键配置完成。
2.部署函数计算代码。
[*]在资源栈页面选择事件页签，找到FcTrigger，在其右侧单击资源ID。
[*]在函数 VideoWatermark 详情页面，选择函数代码页签。
-在函数代码页签下的index.py文件的内容，替换为以下代码示例，在替换代码示例时，将bucket_src替换为启用视频点播服务时配置的Bucket的名称，将bucket_target替换为存储处理后的视频使用的Bucket的名称。
示例代码如下：
<code># -*- coding: utf-8 -*-
import subprocess
import oss2
import logging
import json
import os
import time
import base64
logging.getLogger("oss2.api").setLevel(logging.ERROR)
logging.getLogger("oss2.auth").setLevel(logging.ERROR)
LOGGER = logging.getLogger()
'''
1. function and bucket locate in same region
2. service's role has OSSFullAccess
3. event format
{
"bucket_name" : "test-bucket",
"object_key" : "a.mp4",
"output_dir" : "output/",
"vf_args" : "drawtext=fontfile=/usr/share/fonts/truetype/wqy/wqy-zenhei.ttc:text='hello函数计算':x=100:y=50:fontsize=24:fontcolor=red:shadowy=2",
"filter_complex_args": "overlay=0:0:1"
}
filter_complex_args 优先级 > vf_args
vf_args:
- 文字水印
vf_args = "drawtext=fontfile=/usr/share/fonts/truetype/wqy/wqy-zenhei.ttc:text='hello函数计算':x=50:y=50:fontsize=24:fontcolor=red:shadowy=1"
- 图片水印, 静态图片
vf_args = "movie=/code/logo.png;overlay=10:10"
filter_complex_args: 图片水印, 动态图片gif
filter_complex_args = "overlay=0:0:1"
'''
# a decorator for print the excute time of a function
def print_excute_time(func):
def wrapper(*args, **kwargs):
local_time = time.time()
ret = func(*args, **kwargs)
LOGGER.info('current Function [? excute time is ?f seconds' ? (func.__name__, time.time() - local_time))
return ret
return wrapper
def get_fileNameExt(filename):
(fileDir, tempfilename) = os.path.split(filename)
(shortname, extension) = os.path.splitext(tempfilename)
return fileDir, shortname, extension
@print_excute_time
def handler(event, context):
# 解析消息获取上传视频地址
evt = json.loads(event)
message = evt["messageBody"]
parsed_message = message.encode("utf-8").decode("unicode_escape")
info_bytes = base64.urlsafe_b64decode(parsed_message)
infoData = json.loads(info_bytes)
fileUrl = infoData["FileUrl"]
oss_bucket_name = "bucket_src"
# 从上传视频地址fileUrl解析object key，fileUrl 如 bucketname.oss-cn-shanghai.aliyuncs.com/object-key.mp4
url_split_array = fileUrl.split('com/', 1)
object_key = url_split_array
output_dir = "output/"
vf_args = "movie=/code/logo.png;overlay=10:10"
filter_complex_args = "overlay=0:0:1"
LOGGER.info('object_key:{}'.format(object_key))
if not (vf_args or filter_complex_args):
assert "at least one of 'vf_args' and 'filter_complex_args' has value"
# 初始化oss client
creds = context.credentials
auth = oss2.StsAuth(creds.accessKeyId,
creds.accessKeySecret, creds.securityToken)
oss_client = oss2.Bucket(
auth, 'oss-?internal.aliyuncs.com' ?ontext.region, oss_bucket_name)
exist = oss_client.object_exists(object_key)
LOGGER.info('exist:{}'.format(exist))
if not exist:
raise Exception("object {} is not exist".format(object_key))
# 生成包含签名的url地址，允许ffmpeg命令临时访问视频
input_path = oss_client.sign_url('GET', object_key, 3600)
# 生成输出文件路径
fileDir, shortname, extension = get_fileNameExt(object_key)
dst_video_path = os.path.join("/tmp", "watermark_" + shortname + extension)
# 构造添加水印命令并执行
cmd = ["ffmpeg", "-y", "-i", input_path,
"-vf", vf_args, dst_video_path]
if filter_complex_args:# gif
cmd = ["ffmpeg", "-y", "-i", input_path, "-ignore_loop", "0",
"-i", "/code/logo.gif", "-filter_complex", filter_complex_args, dst_video_path]
LOGGER.info("cmd = {}".format(" ".join(cmd)))
try:
subprocess.run(
cmd, stdout=subprocess.PIPE, stderr=subprocess.PIPE, check=True)
except subprocess.CalledProcessError as exc:
LOGGER.error('returncode:{}'.format(exc.returncode))
LOGGER.error('cmd:{}'.format(exc.cmd))
LOGGER.error('output:{}'.format(exc.output))
LOGGER.error('stderr:{}'.format(exc.stderr))
LOGGER.error('stdout:{}'.format(exc.stdout))
video_key = os.path.join(output_dir, fileDir, shortname + extension)
# 初始化目标oss client，并上传带水印视频
oss_client2 = oss2.Bucket(
auth, 'oss-?internal.aliyuncs.com' ?ontext.region, "bucket_target")
oss_client2.put_object_from_file(video_key, dst_video_path)
LOGGER.info("Uploaded {} to {} ".format(dst_video_path, video_key))
# 移除本地文件
os.remove(dst_video_path)
return "ok"
</code>
[*]单击部署代码。
<h3>验证及清理</h3>
部署云服务后，您可以测试上传视频文件并获取添加水印的视频文件来验证。
<h5>方案验证</h5>
1.上传视频文件。
[*]登录应用型负载均衡ALB控制台。
[*]在实例页面的DNS名称，复制应用型负载均衡ALB实例的DNS地址，在浏览器访问上传视频页面地址DNS名称:8000。
https://upload-images.jianshu.io/upload_images/19316870-49305b01c67100c2.png
[*]在上传视频页面，上传一个视频。
2.获取添加水印的视频文件。
[*]登录OSS管理控制台。
[*]在顶部菜单栏，选择华东2（上海）地域。
[*]在左侧导航栏，选择Bucket列表。
[*]在Bucket列表页面，单击vod-bucket-target。
[*]在文件列表页面，找到添加水印的视频。
<h5>清理资源</h5>
在本方案中，您创建了2台云服务器ECS实例、1个应用型负载均衡ALB实例、2个交换机、1个专有网络VPC、1个云数据库PolarDB MySQL版实例。测试完方案后，您可以参考以下规则处理对应产品的实例，避免继续产生费用：
1.手动删除对象存储OSS Bucket。
登录OSS管理控制台，在左侧导航栏，选择Bucket列表，单击目标Bucket，在文件列表，选择目标文件，然后单击彻底删除。在左侧导航栏，选择删除Bucket，单击删除Bucket，根据页面提示删除Bucket。
2.手动删除FC服务。
登录函数计算控制台，在左侧导航栏，选择服务及函数，在服务列表页面，找到目标服务，在其右侧操作列，单击删除，根据页面提示删除服务。
3.手动删除VOD服务。
登录视频点播管理控制台，在左侧导航栏，选择配置管理 > 媒资管理配置 > 存储管理，在目标Bucket右侧操作列，单击删除，根据页面提示删除Bucket。
4.一键自动删除其他资源。
[*]登录ROS控制台。
[*]在左侧导航栏，选择资源栈。
[*]在资源栈页面的顶部选择部署的资源栈所在地域，找到资源栈，然后在其右侧操作列，单击删除。
[*]在删除资源栈对话框，选择删除方式为释放资源，然后单击确定，根据提示完成资源释放。
官网相关地址直达：
1.视频网站的存储与媒体处理方案：https://www.aliyun.com/solution/tech-solution/vsaps
2.阿里云服务器ECS相关活动：https://www.aliyun.com/daily-act/ecs/activity_selection
3.云小站（代金券发布平台）：https://www.aliyun.com/minisite/goods
https://upload-images.jianshu.io/upload_images/19316870-5f1747d3cd17a545.png
<div class="image-caption">云小站代金券图.png
页:
[1]