视频字幕处理+AI绘画,Runway 全功能超详细使用教程(4)

runway的视频字幕处理、AI绘图功能介绍,感觉完全就是为了做电影而布局,一整套功能都上线了!想系统学习的必收藏!


在深度研究Runway各个功能后,无论是AI视频生成及后期处理技术,还是AI图像生成技术,Runway都很能打,AI视频领域大有可为!


接下来开始详细讲解Runway导航栏中按顺序讲解每个功能;

3f0bb63ce295e9096f3adf251c4700d9.jpeg


Edit audio & subtitles(音频字幕处理工具)


Runway在音频字幕处理方面提供了4个功能:

d295b993a61657b5fe009624885cf40b.jpeg


首先点击左侧导航栏,点击“Edit audio & subtitles”,页面会弹出4个工具选项


bb1d8c31b469db136f088dbbb770be6d.jpeg


Clean Audio (去噪声)

点击Clean Audio,跳转音频处理界面


bde518afeee35e9cde1d86f68101c7d2.jpeg


接着上传视频


9e222666641df7c0ec7f19449d36382e.jpeg


接着点击Clean Audio按钮,大约等待几秒时间,就能得到消除噪音后的音频。


dfbfcc1475bf9bae98b55b9e5d052833.jpeg


Remove Silence (删除静音)

点击Clean Audio,跳转音频处理界面


6890d4fc2e38312d55294b55fa40c92b.jpeg


同样上传需要处理的视频文件。


e24d800c1e95ed58dc23ba09e939600d.jpeg


视频上传后,系统会自动检测静音部分,并将其标注红色。


fd9f200b1a06d7a5866b505f17e14cad.jpeg


在右侧参数Threshold,Padding一般就确定默认值,最后点击“Remove Silence"去除静音部分,即可保存下载视频。


91ecfa944456612fa0157901fd6ac842.jpeg


Transcript(音频转文本) 

点击Transcript,跳转音频处理界面


f0d007fbc0b05b7f0f7df7f4480de11f.jpeg


同样上传需要处理的视频文件。


a6a3352b5a99e4e812552aaeb6f3fbbb.jpeg


视频上传后,在右侧框中勾选转化后的文本语种,目前系统只支持生成10种语种,很可惜,并没有中文,然后点击“Generate”。


11dc417b221781a969b2ccce3ec4f927.jpeg


351591757887d19f673da9865b8cdf32.jpeg


静等几秒后,页面会弹出提取后的文本内容,如果你想对其进行修改,可以点击“Edit .srt”。


d0f1f9c2c1fd942715842c38f4e4076f.jpeg


对文本框中的内容进行编辑,检查没有没有问题的话,即可点击Download .srt下载文档。


c1a85123846a9f490b0c7742f954a3a2.jpeg


Subtitles(生成字幕)

点击Subtitles,跳转视频处理界面,同样上传视频,提供设置,可以通过文本转换技术,将音频的转录文本转换为字幕格式,方便用户查看。与剪映的智能字幕类似,这个功能是付费功能,这里就不做演示。


30debc7961594301762594fa513f19a2.jpeg


以上就是Edit audio & subtitles4个功能介绍。


接下来将讲解图像功能模块

lmages图像生成处理技术有两大功能

  • Generate images(图像生成功能)
  • Edit images(图像后期处理功能)

ed341b2756118b4c2cbb7bbc1a47b68c.jpeg


包含了文生图/图生图/扩图/扣图/智能修复等12个图像生成处理功能


lmages

(1)Generate images

Runway图像生成技术模块有5个工具


d72871c0e8a983160191ddbc586b1a0a.jpeg


e8d267cdc7f04179bc6a0eb3bf61a39e.jpeg


Text to lmage (文生图工具)

这个功能只需输入提示词即可生成图像,首先点击“Text to lmage”选项


61e0908baef06960cb709511ffa650f4.jpeg


进入编辑界面,首先在右侧基础选项进行勾选。


9f89c2cd080b07e29e992aee5096c586.jpeg


接着在对话框中输入提示词,最后点击Generate即可生成图像。


020f53fc8eb4bb841c19236c1f7f82c2.jpeg


生成后的图像效果非常不错。


d7c5cae4c21dc190f738beb327a0de75.jpeg


Image to lmage(图生图工具)

这个功能只需上传图片,系统即可生成相似的图像,首先点击“Image to lmage”选项。


d683e83baa01c0e2f1e2ef6ef4124503.jpeg


接着上传提前准备好的图片


19d15aeb833f7346c25d3d27c5e2c855.jpeg


进入编辑界面,首先在右侧基础选项进行勾选。


bd021ab792cbe1620d6fb1e8894f5b90.jpeg


同样你也可以输入提示词,让生成的图像更完美,最后点击Generate生成图像


089322a04435929b97a14735a203d8a1.jpeg


Train your own(训练模型工具)

这个功能就是Runway刚上线不久的,自定义AI模型,只需上传多角度的人物或者动物图片,系统即可生成系列的图像,首先点击“Train your own”选项。


159215a7956c2b4d9957cd61b8cd774e.jpeg


页面会出现3模型选项

由于这个功能是付费板块,感兴趣的同学们可以自行测试。


dfaef359a671666b77a2407b0ae0c3f3.jpeg

e1c1fadc4736ed05a9d641dff77d3526.jpeg


Infinite Image (无限延展扩图工具

这个功能通过简单的文本提示就可以把小图像无限联想扩展图像外生成更多扩展内容,首先点击“Infinite Image”选项。


3c545d09f39bb84e7a9548cf0e6fb469.jpeg


跳转到编辑界面


eab178eefefafd2b98506eb14bb8570b.jpeg


40726f129ebc5211f83ce055d8c351dc.jpeg


你可以在线进行局部修改,以及扩图。


3e67d4f3c5f4115cd28db775fa7119d8.jpeg


lmage Variation(图像变体工具)

这个功能可以基于单个原始图像自动生成多达四个图像变体。首先点击“lmage Variation”选项。


c28a1e5f4016d31848ec9ee348b9f7f2.jpeg


接着上传图片


07e3c9a6b3c2f0066963fcfb5f695ac3.jpeg


在右侧点击Generate即可生成图像


86254ec43d78986909413836c4d24c64.jpeg


(2)Edit images

除了图像生成技术外,Runway图像后期处理模块具有7个功能


b779a2be43ab4c474ffbce577e8105ac.jpeg


7552709b3cb72bc457bbcefe83379e60.jpeg


①Expand Image(扩展图像)

这个功能智能感知生成的填充将上传的图像扩展到新的纵横比。首先点击“Expand Image”选项。


d8fb0061bf41beb388ab61d3f7a8e05c.jpeg


接着上传视频


cb358c1d450a4f223e74756b08de0fc6.jpeg


然后可以在右侧输入框中填写图像扩展的内容,以及扩展尺寸设置,最后点击Generate生成。


b33ebc67c47ed7d5f62e055681c18721.jpeg


②Frame Interpolation(帧插值)

这个功能可以实现将一系列图像串在一起形成动画视频,首先点击“Frame Interpolation”选项。


f83d7cc1dd6271f95cedb5e6202eaa58.jpeg


接着上传多张图片,系统将会自动生成上传图像之间的平滑过渡,以创建流畅的视频结果,最后点击Generate即可生成动画视频。


044fa998fcf4adf3f4984dc08d5f7914.jpeg


③Erase and Replace(擦除和替换)

这个功能可以进行擦除不需要的局部内容,还可以通过文本进行修改生成。首先点击“Erase and Replace”选项。


5c87ae1284b2bec31cfd9c92cac92b61.jpeg


上传图片


d13db4801bfc6e030de7d7db9b1d0b1f.jpeg


接着在编辑界面中,用橡皮擦在图像中抹除不满意的部分,接着在对话框中输入提示词,系统就会按照提示词内容进行替换。


a9e60d39a85820134007f388caa7724b.jpeg


④Backdrop Remix(背景混合)

这个功能通过改变提示关键词重新混合生成任何AI图像的风格和构图,首先点击“Backdrop Remix”选项。


307b414aeb30b36bfcdcb1cefd11bb4c.jpeg

上传图片后,可以在右侧编辑界面中,输入提示词,或者应用系统的模板样式,即可生成新的图像。


0a19f4f6871ecdd5d770addf612c21fa.jpeg


⑤lmage Variation(图像变化)

这个功能跟Generate images中的lmage Variation一致的,这里就不重复赘述。

d4064dc7a4fc3ed81f84921063f2a509.jpeg

⑥Add color(添加颜色)

这个功能可以实现一键着色,将黑白图片立即修复,首先点击“Add color”选项。

6cd42bf3c7b7a98888142214b91d25a3.jpeg


上传图像后,即可点击Colorize进行着色。


1dff0ec20e1f964b477c444ff9ce13be.jpeg


⑦Upscale Image(图像智能修复)

这个功能可以理解为将图像从低分辨率转换为高分辨率,一键将模糊的图片瞬间变得高清,首先点击“Upscale Image”选项。


f6b57e07f5dcffed4a766d14d06245d2.jpeg


上传图片后,在右侧选项中勾选合适的分配率,支持720P/1080P/2K/4K


0cd191310c19fb409c94aca7a71a43f8.jpeg


192a320bc9123fc625877f2ef8450c58.jpeg


三、3D

Runway除了视频及图像生成技术外,还具有3D生成功能,分别为:


ea230fbf6b710170e36296376ca1e60c.jpeg


6fed55bc2008de07e3b07606838c4b26.jpeg


(1)3D Capture (3D捕捉)

这个功能可以将物体通过拍摄AI合并成3D场景

首先点击3D Capture


0f0f32dd48efd7e4897ee9d1a5833c6f.jpeg


跳转到新的页面,这里可以查看拍摄教程,掌握后,即可点击操作按钮,上传一个视频


0f6a2dc1f8e678198d32ab6fbc98f713.jpeg


视频拍摄指导教程

  • 围绕一个目标场景或对象。
  • 30秒或更长时间,1到3分钟最好
  • 禁用HDR
  • 选择具有高FPS的相机设置 (通常出现在慢动作模式下)
  • 缓慢移动相机以减少模糊
  • 接受普通和广角镜头视频

50975891a89e49141e24aa9909e38d0c.jpeg


视频上传后,即可在右侧名号好文件名称,即可点击Next - Train 3D Capture


d548ff5e707545c9bdee5f068a86d775.jpeg


(2)3D Texture(文生三维图)

这个功能可以通过文本描述生成3D图形,首先点击3D Texture。


87e37ca74df1014849809e76fe8779f9.jpeg


接着在对话框中输入提示词,点击Generate即可生成图像。


f955ce7611584f71bf49e2688bb57d74.jpeg


3D图像生成后,可以对右侧参数选项进行设置优化。


e5582543dc0a0441dabd003872ab7b69.jpeg


以上就是所有Runway功能点教程内容。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/198167.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

如何控制Spring工厂创建对象的次数?详解Spring对象的声明周期!

😉😉 学习交流群: ✅✅1:这是孙哥suns给大家的福利! ✨✨2:我们免费分享Netty、Dubbo、k8s、Mybatis、Spring...应用和源码级别的视频资料 🥭🥭3:QQ群:583783…

怎么更新BI报表数据?问我就对了

BI大数据分析工具上有大量的BI报表模板,这些模板都是一个个完整的BI报表,只需将数据源更换,立即就能用来分析我们自己的数据。那,BI报表的数据怎么更新?接下来就来说说这事。 目的:更新BI报表数据 工具&a…

如何编写自己的python包,并在本地进行使用

如何编写自己的python包,并在本地进行使用 一、直接引用 1.创建Python项目pythonProject。 2.并且在此项目下创建pg_message包。 3.pg_message包下默认生成_init_.py文件。 Python中_init_.py是package的标志。init.py 文件的一个主要作用是将文件夹变为一个Python模块,Pyt…

如何使用企业微信 WorkTool API 开源框架快速开发企微聊天机器人(详细教程)

WorkTool 基本框架概述 WorkTool 是一个依附于企业微信来运行的无人值守群管理机器人程序,WorkTool 开源,并且永久免费。您可以使用本应用程序来自动执行一个自己企业微信里的账号(当做机器人账号)可通过后台调用对应的 API 来驱…

Jmeter和Testlink自动化测试框架研究与实施

摘 要 目前基于Jmeter的接口自动化测试框架,大多只实现脚本维护和自动调度,无法与Testlink进行互通,实现测试方案与自动化实施流程连接,本文基于Testlink、Jmeter、Jenkins实现:通过Testlink统一维护接口自动化测试用…

ArrayList和顺序表

目录 线性表 顺序表 实现顺序表: 1,添加元素的时候我们要判断是否需要扩容 2,写异常 3,数组清空 ArrayList: ArrayList的构造方法: ArrayList的add方法: ArrayList的subList 知识点补充&#xff…

知识蒸馏—原理+代码实战(Distillation CNN 和 Progressive Distillation Diffusion)

文章目录 1. Distillation 基本概念2. Distillation MNIST CNN分类代码实战3. Progressive Distillation Diffusion生成代码实战3.1 Progressive Distillation原理3.2 v-parameterization3.2 渐进蒸馏 cifar 代码实战 1. Distillation 基本概念 知识蒸馏被广泛的用于模型压缩和…

使用STM32 HAL库驱动光电传感器的设计和优化

光电传感器在许多应用中起着重要的作用,例如自动计数、距离测量等。STM32微控制器和HAL库提供了丰富的功能和易于使用的接口,使得光电传感器的设计和优化变得更加便捷。本文将介绍如何使用STM32 HAL库驱动光电传感器的设计和优化,包括硬件设计…

Linux Nmap命令解析(Nmap指令)(功能:主机发现、ping扫描、arp扫描、端口扫描、服务版本检测、操作系统识别等)

文章目录 Linux Nmap 命令解析简介Nmap 的核心功能主机发现端口扫描服务版本检测OS 指纹识别(操作系统指纹识别)脚本扫描 安装 NmapNmap 命令结构Nmap 命令文档英文中文 主机发现Ping 扫描ARP 扫描关于nmap -PR(ARP Ping Scan)和n…

接口测试工具(Jmeter)必学技巧

安装 使用JMeter的前提需要安装JDK,需要JDK1.7以上版本 目前在用的是JMeter5.2版本,大家可自行下载解压使用 运行 进入解压路径如E: \apache-jmeter-5.2\bin,双击jmeter.bat启动运行 启动后默认为英文版本,可通过Options – Choos…

web:NewsCenter

题目 打开页面显示如下 页面有个输入框,猜测是sql注入,即search为注入参数点,先尝试一下 返回空白显示错误 正常显示如下 是因为单引号与服务端代码中的’形成闭合,输入的字符串hello包裹,服务端代码后面多出来一个‘导…

java学习part18抽象类

Java抽象类 详解-CSDN博客 111-面向对象(高级)-抽象类与抽象方法的使用_哔哩哔哩_bilibili 1.概念 2.抽象类 抽象类不能实例化,可以有属性,也可以有方法。 方法可以实现或者只声明不实现,要加一个abstract abstract class A{//定义一个抽…

51单片机使用串口查看程序执行的数据

51单片机使用串口查看程序执行的数据 1.概述 这篇文章介绍利用串口输出程序执行的数据,辅助我们调试程序,提高代码定位问题的效率。 2.硬件电路原理 3.串口助手查看程序数据 输出串口数据的方式分为CPU查询方式和中断方式。他们各有优缺点&#xff0…

【CVE-2023-49103】ownCloud graphapi信息泄露漏洞(2023年11月发布)

漏洞简介 ownCloud owncloud/graphapi 0.2.x在0.2.1之前和0.3.x在0.3.1之前存在漏洞。graphapi应用程序依赖于提供URL的第三方GetPhpInfo.php库。当访问此URL时,会显示PHP环境的配置详细信息(phpinfo)。此信息包括Web服务器的所有环境变量&a…

k8s部署sonarqube

1.先决条件需要storageClass,动态制备,自动创建pv/pvc.详情参见 k8s-StoargClass的使用-基于nfs-CSDN博客 部署postgresql 2.创建ServiceAccount,用于权限管控. [rootmaster /zpf/test]$cat init-sc-serviceaccount.yaml apiVersion: v1 kind: ServiceAccount metadata:nam…

Joint Bilateral Upsampling

Abstract 图像分析和增强任务(例如色调映射、着色、立体深度和蒙太奇)通常需要在像素网格上计算解决方案(例如,曝光、色度、视差、标签)。计算和内存成本通常要求在下采样图像上运行较小的解决方案。尽管通用上采样方…

【MySql】14- 实践篇(十二)-grant权限/分区表/自增Id用完怎么办

文章目录 1.grant之后要跟着flush privileges吗?1.1 全局权限1.2 db 权限1.3 表权限和列权限1.4 flush privileges 使用场景 2. 要不要使用分区表?2.1 分区表是什么?2.2 分区表的引擎层行为2.3 分区策略2.4 分区表的 server 层行为2.5 分区表的应用场景 3. 自增Id…

代码随想录算法训练营第四十九天【动态规划part10】 | 121. 买卖股票的最佳时机、122.买卖股票的最佳时机II

121. 买卖股票的最佳时机 题目链接: 力扣(LeetCode)官网 - 全球极客挚爱的技术成长平台 求解思路: 动规五部曲 确定dp数组及其下标含义:使用一个二维数组dp[i][2],dp[i][0]代表持有股票的最大收益&…

解决electron-builder打包不成功只能输出tgz文件的问题

现象: 对应项目里配的指令: 但就是死活不成功,只能输出tgz压缩文件。 最后一咬牙下载了官方的electron-quick-start拿来试试,结果还是一样。 一时间没想法了。 后来突然脑袋灵光一闪,去他妈的直接npx 执行看看&…

xxl-job适配postgresql数据库

xxl-job支持了mysql数据库,其他的数据库适配得自己弄一下,下面以目前最新的2.4.1为例进行说明适配postgresql数据库的过程。 获取源代码 从github或gitee获取源代码,目前最新版本2.4.1 xxl官网:分布式任务调度平台XXL-JOB 建立…