字节跳动推出 USO 模型,打破 AI 图像生成的 “风格与主题” 对立
在 AI 图像生成领域,风格驱动和主题驱动的图像生成一直以来被视为两个相对独立的任务。前者注重风格的相似性,而后者则强调主题的字一致性,造成了两者之间的矛盾。最近,字节跳动的智能创作实验室(UXO Team)推出了名为 USO(统一风格 - 主题优化)的新模节跳型,成功地解决了这一行业长期以来的难题。
字节跳动的研究人员深知 AI 模型的成长依赖于数据。因此,他们建立了一个庞大的数据集,包含动推大约20万个三元组。每个三元组包括一张 “风格参考图”、一张 “内容参考图”,以及一张 “风格化目标图”。通过这个设计,模型能够学出 习如何将风格与内容相结合。
在模型的训练过程中,字节跳动采用了独特的两阶段训练法。第一阶段专注于风格的学习,采用了先进的图像US编码器,帮助模型理解更深层次的艺术风格。第二阶段则将内容信息加入,通过处理确保主题的准确性。这一方法让风格和内容在模型中分开学习,最O 终在生成图像时实现完美融合。
为了进一步提升模型的表现,字节团队还引入了风格奖励学习(SRL)机制,通过强化训练激励模型在保模型持主题不变的情况下尽量模仿风格。最终,这一系列创新使 USO 在生成图像时展现出了极高的灵活性和精准度。
为验证 USO 的能力,字节跳动还推,打出了业界首个能同时评估风格相似度和主题保真度的基准测试平台 USO-Bench。在这一平台上,USO 在各个维度上均取得了显著优势,超越破 了现有的开源模型。
USO 的技术不仅在数字艺术领域表现出色,也为商业设计带来了新的可能。品牌可以利用 USO 生成风格多样但又统AI一的营销材料,满足不同平台的需求。更重要的是,USO 已经全面开源,鼓励更多的开发者和创作者一起探索其潜力。
github:h 图ttps://github.com/bytedance/USO
体验:https://huggingface.co/spaces像生/bytedance-research/USO
划重点:
- 字节跳动推出的 USO 模型打破了风格与主题的对立,实现了两者的完美结合。
-成的 USO 模型通过创新的训练方式和庞大的数据集,提升了图像生成的灵活性与精准度。
- USO 已全面开源,鼓励开发者探索其在创意内容 “和商业设计中的应用。
- ·无服务器计算的优势和风险
- ·优秀工具!用于机器学习的10种文本注解工具和服务
- ·标签: 理想汽车 秦东 SoC芯片 自动驾驶
- ·标签: 金山软件 WPS 办公软件 网络游戏
- ·为什么只靠云成本管理无法解决云支出问题
- ·标签: 滴滴充电 双碳目标 超充枪 绿色出行
- ·标签: 腾讯 马化腾 元宝 混元大模型
- ·微软 CEO 纳德拉:将在印度投资 30 亿美元扩展 Azure 云计算和人工智能能力
- ·标签: 锐石创芯 OPPO 哈勃投资 顺为资本
- ·标签: 微软 纳德拉 动视暴雪 游戏业务
- ·人工智能能否真正构建软件?Zed 编辑器团队给出了答案!
- ·标签: 大普微 SSD 深圳IPO 半导体
- ·戴尔第一季度营收245亿美元 净利润同比增长520%
- ·月之暗面发布Kimi Linear架构:KV缓存减少75%,推理速度提升6倍,Attention机制迎来颠覆性革新!
- ·标签: 微盟 WAI WIME AI Work365
- ·标签: 虎牙直播 游戏
- ·云计算核心技术Docker教程:Docker Hub创建私人仓库
- ·OpenAI加速亚洲扩张,实惠套餐“ChatGPT Go”登陆16国,与谷歌争夺市场
- ·NLP玩得溜,「兵器」得趁手:GLUE排行第一那种,了解下?
- ·标签: 长安汽车 韩某 内幕交易 投服中心
- ·标签: 特斯拉 Cybertruck 阿瓦斯蒂 Model 3
- ·标签: 瑞发科 SerDes芯片 车规级芯片 华为哈勃
- ·战略级新增长点!地图巨头高德启动无人驾驶出租车业务
- ·标签: 字节跳动 芯片研发 SOC设计 云端芯片
- ·标签: 星星充电 万帮数字 港交所上市 施耐德电气
- ·日本初创企业 Sakana AI:借鉴自然智慧推动人工智能创新
- ·https://www.qidulp.com/search?query=谷歌自动批量发帖软件【tg:seogoogle987】,Ran
- ·https://www.openspaceinstitute.org/search?q=谷歌自动批量发帖软件【tg:seogoogle987】,oQn
- ·https://www.wmfe.org/?s=谷歌自动批量发帖软件【tg:seogoogle987】,Zph
- ·https://www.tombow.com/en/search/谷歌自动批量发帖软件【tg:seogoogle987】,Na6
- ·https://www.remit.co.jp/id/?s=谷歌自动批量发帖软件【tg:seogoogle987】,Bwk
- ·https://www.wheels24.gr/?action=CHECK&s=谷歌自动批量发帖软件【tg:seogoogle987】,PTU
- ·https://hsmoa.com/search?query=谷歌自动批量发帖软件【tg:seogoogle987】TRP
- ·https://www.posten-portal.de/search?query=谷歌自动批量发帖软件【tg:seogoogle987】,Twl
- ·https://www.safetv.go.kr/base/search/view?searchWord=谷歌自动批量发帖软件【tg:seogoogle987】uXz
- ·https://www.monroecounty.gov/search/?q=谷歌自动批量发帖软件【tg:seogoogle987】,ihc
