每周跟踪AI热点新闻动向和震撼发展 想要探索生成式人工智能的前沿进展吗?订阅我们的简报,深入解析最新的技术突破、实际应用案例和未来的趋势。与全球数同行一同,从行业内部的深度分析和实用指南中受益。不要错过这个机会,成为AI领域的领跑者。点击订阅,与未来同行! 订阅:https://rengongzhineng.io/
Adobe的Firefly系列生成AI模型在创意人士中的声誉并不佳。特别是Firefly图像生成模型,与Midjourney、OpenAI的DALL-E 3以及其他竞争对手相比,它因画面扭曲和对细节的处理不足而被视为不足。然而,Adobe正试图通过其第三代模型——Firefly Image 3来改善这一状况,该模型于本周在公司的Max London会议期间发布。
这款现已在Photoshop(测试版)和Adobe的Firefly网络应用中可用的模型,比前两代(Image 2和Image 1)生成的图像更“真实”,这归功于其对更长、更复杂的提示和场景的理解能力,以及改进的照明和文字生成功能。Adobe表示,它应该能更准确地渲染包括排版、图标、栅格图像和线条艺术在内的内容,并且在描绘拥挤人群和具有“详细特征”及“多种情绪和表情”的人物方面“显著”更加娴熟。
据非正式测试显示,Image 3确实比Image 2有所提升。以下是Image 3和Image 2对比的示例,展示了Image 3在场景理解方面的进步:
Image 2
- Image 3的照明和细节处理在一个头像示例中表现得更为细致和生动。
- 在描绘艺术家工作室的场景中,Image 3展示的细节和表现力水平明显高于Image 2。
Image 3.
Image 3的改进无疑得益于更大、更多样化的训练数据集。与Image 2和Image 1一样,Image 3是在Adobe Stock上传内容、已授权和版权到期的公共领域内容的基础上进行训练的。Adobe Stock不断增长,相应的可用训练数据集也在增加。
为了避免诉讼并将自己定位为一个更“道德”的选择,Adobe对训练数据集中的Adobe Stock贡献者实施了支付计划,尽管该计划的条款相当不透明。有争议的是,Adobe还在训练Firefly模型时使用了AI生成的图像,有些人认为这是一种数据洗白行为。
最近的报道揭示,Adobe Stock中的AI生成图像没有从Firefly图像生成模型的训练数据中排除,在这些图像可能包含重复使用的版权材料的情况下,这是一个令人担忧的前景。Adobe为这一做法辩护,声称AI生成的图像只占其训练数据的一小部分,并经过审核过程以确保它们不会展示商标或可识别的角色,或引用艺术家的名字。
尽管拥有更多样化、更“道德”来源的训练数据以及内容过滤器和其他安全措施,也不能保证完全无瑕疵的体验。Image 3的真正测试将在社区开始广泛使用后到来。
与此同时,Image 3为Photoshop带来了几项新的AI驱动功能,不仅仅是增强的图文转换能力。
Image 3的“风格引擎”和新的自动风格化开关,让模型能够生成更广泛的颜色、背景和主题姿势。这些功能被整合到了参照图像选项中,允许用户根据他们希望其未来生成内容
对齐的图像的颜色或调性来调整模型。
新增的三个生成工具——生成背景、生成相似和增强细节——利用Image 3执行精确的图像编辑。生成背景将背景替换为与现有图像融合的生成背景,生成相似则提供照片选定部分的变体(例如人物或物体)。至于增强细节,它则“微调”图像以提高清晰度和清晰度。
Adobe表示,当前的定价层将保持不变,其赔偿政策,声明Adobe将支付与Firefly生成作品相关的版权索赔,也不会改变,其AI生成内容的水印方法也是如此。内容凭证——标识AI生成媒体的元数据——将继续自动附加到网络上和Photoshop中的所有Firefly图像生成上,无论是从头开始生成还是部分使用生成功能编辑的。