【藏经阁一起读】(69)__《阿里云视频云产品手册2023版》
目录
一、概述阿里云视频云全产品矩阵
二、数字人视频制作
以下是人工智能虚拟人物的一些优秀代表作品及其特点:
阿里云视频云数字人视频制作产品优势
▶高还原度的拟真效果
▶场景化智能AI联动处理
▶丰富的衍生制作能力
▶灵活的应用方案
阿里云视频云数字人视频制作产品能力
▶数字人形象训练及渲染
▶人声克隆训练及渲染
▶场景化视频抠图
▶模板化视频成片及精编二创
▶数字人直播实时互动
三、感触
一、概述
这个产品手册一共分为五章,阿里云视频云、视频服务、智能媒体服务、媒体开发服务、生态合作
阿里云视频云全产品矩阵
二、数字人视频制作
手册中智能媒体部分有介绍数字人视频制作的。
虚拟人物生成是一种人工智能技术,即使用深度学习算法训练庞大的数据集来创造高质量的虚拟人物或角色。
这种技术的创意背景可以是游戏开发、电影制作、虚拟现实、社交媒体、人机交互等领域。
该技术可用于创造真实感、表现力、交互性强的虚拟人物,进而拓展用户体验的多样化与个性化。
数字人视频制作(Digitalizepro)整合仿真形象渲染、声音克隆和视频精编二创等多种能力,开放数字人形象和人声特征克隆模型的自助训练,基于文字或语音驱动数字人,后期可基于数字人应用的场景添加动态视频、图片、字幕、特效等生成数字人视频成片,为用户提供一站式数字人视频制作服务。
以下是人工智能虚拟人物的一些优秀代表作品及其特点:
作品名称 | 代表角色 | 特点 |
---|---|---|
Siri | 苹果公司 | 智能语音助手,能回答问题、执行命令、发送信息等 |
Cortana | 微软公司 | 智能语音助手,类似Siri,但更加个性化,能获取更多的信息并预测用户需求 |
Watson | IBM公司 | 人工智能平台,能进行自然语言处理、机器学习和数据分析等任务 |
Xiaoice | 微软中国 | 语音交互式人工智能机器人,能扮演聊天伴侣、情感陪伴和知识助手等角色 |
Replika | Luka公司 | 基于聊天机器人技术的虚拟人物,能模拟人类情感和思维,通过聊天与用户建立情感连结 |
Mitsuku | Pandorabots公司 | 多次获得Loebner人工智能对话竞赛冠军的聊天机器人,能与用户进行自然语言对话并提供各种服务和功能 |
Erica | 株式会社人工智能(日本) | 由大量对话数据训练而成的人工智能虚拟人物,能模拟人类情感和行为,被称为“最人性化”的机器人 |
GPT-3 | OpenAI | 自然语言处理模型,具有惊人的语言生成能力,能够产生连贯、逻辑的自然语言文本 |
AvatarMind Robot | AvatarMind公司 | 拥有机器视觉、语音识别、自然语言处理和运动控制等多种功能的机器人,被称为“智慧之脑机器人”。 |
阿里云视频云数字人视频制作产品优势
▶高还原度的拟真效果
- 基于阿里云多年的技术沉淀和研发实力,持续迭代调优渲染算法依靠高性能的硬件资源,保障高品质的渲染效果和高效的任务处理
▶场景化智能AI联动处理
- 支持人声克隆,形象拟真和人声拟真,实现人物形象IP整体复刻
- 支持绿幕或实景抠图,灵活的人物及附属物选择,实现视频成片精细化预处理
▶丰富的衍生制作能力
- 开放强大的视频制作工具,可对数字人源素材进行高质量二次创作,输出视频成片提供强大的视频模板创作工具,将结构化视频预设为模板,实现自动批量化模版成片
▶灵活的应用方案
- 支持PaaS级灵活接入,提供数字人训练及渲染、视频精编等多种 API 和 WebSDK 接口支持互动直播场景的SaaS服务,支持数字人脚本、数字人互动预设、直播间装修等服务
阿里云视频云数字人视频制作产品能力
▶数字人形象训练及渲染
- 基于输入的文本或语音驱动经过算法训练的2D仿真人进行表情和动作等拟真表达
- 基于输入的文本、语音、动作指令等,驱动建模的卡通形象完成丰富的动画表达
▶人声克隆训练及渲染
- 20句话简单录制,系统自动分配录制文案
- 3大细分场景支持,故事、交互、导航
- 30分钟完成克隆,便捷快速复刻人声
▶场景化视频抠图
- 高质量视频抠图:准确识别发丝细节、人物边缘等,支持局部优化,抠出图像内容边界清晰自然无残漏
- 灵活定义抠图范围:在抠出人像的同时,可指定抠出人像附属物,如桌面,手持物品、装置道具等
- 背景环境融合自适应:在不同光线及色彩环境下,自动调整数字人适配不同环境,保障视频成片自然统一
▶模板化视频成片及精编二创
- 提供模板化创作工具,利用非线编编辑器或AE制作模板库,结合数字人自动化渲染,提供数字人名片、数字人慕课等多种模板组合方案,为用户提供批量化和高品质的数字人视频生产工具箱
▶数字人直播实时互动
- 针对数字人互动直播的标准场景,提供开箱即用的SaaS工具
- 实现直播间装修、数字人脚本设定、互动方案预置、一键开播等完整的可视化配置服务
三、感触
我尝试过其他数字人的制作,
不知道基于阿里云视频云的数字人制作如何,找个时间尝试一下。
推荐阅读:
大数据的关键技术之——大数据采集 |
[你找到牵手一辈子的人了吗?] 七夕情人节特辑 |
数字技术能让古籍“活过来”吗? |
心情不好时,帮自己训练个AI情绪鼓励师吧(基于PALM 2.0 finetune) |
深度学习框架TensorFlow |
人工智能开发人员工作流程、看法、工具统计数据 |
2023 年6月开发者调查统计结果——最流行的技术(2) |
2023 年6月开发者调查统计结果——最流行的技术(1) |
让Ai帮我们画个粽子,它会画成什么样呢? |
| | |
给照片换底色(python+opencv) | 猫十二分类 | 基于大模型的虚拟数字人__虚拟主播实例 |
| | |
计算机视觉__基本图像操作(显示、读取、保存) | 直方图(颜色直方图、灰度直方图) | 直方图均衡化(调节图像亮度、对比度) |
| | |
语音识别实战(python代码)(一) | 人工智能基础篇 | 计算机视觉基础__图像特征 |
| ||
matplotlib 自带绘图样式效果展示速查(28种,全) | ||
| ||
Three.js实例详解___旋转的精灵女孩(附完整代码和资源)(一) | ||
| | |
立体多层玫瑰绘图源码__玫瑰花python 绘图源码集锦 | Python 3D可视化(一) | 让你的作品更出色——词云Word Cloud的制作方法(基于python,WordCloud,stylecloud) |
| | |
python Format()函数的用法___实例详解(一)(全,例多)___各种格式化替换,format对齐打印 | 用代码写出浪漫__合集(python、matplotlib、Matlab、java绘制爱心、玫瑰花、前端特效玫瑰、爱心) | python爱心源代码集锦(18款) |
| | |
Python中Print()函数的用法___实例详解(全,例多) | Python函数方法实例详解全集(更新中...) | 《 Python List 列表全实例详解系列(一)》__系列总目录、列表概念 |
| | |
用代码过中秋,python海龟月饼你要不要尝一口? | python练习题目录 | |
| | |
草莓熊python turtle绘图(风车版)附源代码 | 草莓熊python turtle绘图代码(玫瑰花版)附源代码 | 草莓熊python绘图(春节版,圣诞倒数雪花版)附源代码 |
| | |
巴斯光年python turtle绘图__附源代码 | 皮卡丘python turtle海龟绘图(电力球版)附源代码 | |
| | |
Node.js (v19.1.0npm 8.19.3) vue.js安装配置教程(超详细) | 色彩颜色对照表(一)(16进制、RGB、CMYK、HSV、中英文名) | 2023年4月多家权威机构____编程语言排行榜__薪酬状况 |
| | |
手机屏幕坏了____怎么把里面的资料导出(18种方法) | 【CSDN云IDE】个人使用体验和建议(含超详细操作教程)(python、webGL方向) | 查看jdk安装路径,在windows上实现多个java jdk的共存解决办法,安装java19后终端乱码的解决 |
| ||
vue3 项目搭建教程(基于create-vue,vite,Vite + Vue) | ||
| | |
2023年春节祝福第二弹——送你一只守护兔,让它温暖每一个你【html5 css3】画会动的小兔子,炫酷充电,字体特 | 别具一格,原创唯美浪漫情人节表白专辑,(复制就可用)(html5,css3,svg)表白爱心代码(4套) | SVG实例详解系列(一)(svg概述、位图和矢量图区别(图解)、SVG应用实例) |
| | |
【程序人生】卡塔尔世界杯元素python海龟绘图(附源代码),世界杯主题前端特效5个(附源码) | HTML+CSS+svg绘制精美彩色闪灯圣诞树,HTML+CSS+Js实时新年时间倒数倒计时(附源代码) | 2023春节祝福系列第一弹(上)(放飞祈福孔明灯,祝福大家身体健康)(附完整源代码及资源免费下载) |
| | |
tomcat11、tomcat10 安装配置(Windows环境)(详细图文) | Tomcat端口配置(详细) | Tomcat 启动闪退问题解决集(八大类详细) |