字节跳动推出统一的视频生成框架Phantom :通过跨模态对齐实现主体一致性的视频生成 字节跳动的研究人员推出一个统一的视频生成框架Phantom ,通过跨模态对齐实现主体一致性的视频生成(Subject-to-Video, S2V),用于单主体和多主体参考,构建在现有的文本到视频和图像... 新技术# Phantom# 字节跳动# 视频生成 2天前090
字节跳动推出基于修正流Transformer 架构的新型图像和视频生成模型家族Goku 香港大学和字节跳动的研究人员推出新型图像和视频生成模型家族Goku,它基于修正流Transformer 架构,实现了行业领先的图像和视频联合生成性能。Goku 的目标是通过高质量的视觉内容生成,推动媒... 视频模型# Goku# 字节跳动# 视频生成 2周前0560
字节跳动发布豆包大模型 1.5 Pro,性能超越 GPT-4o 和 Claude 3.5 Sonnet 字节跳动今日正式发布了其最新的豆包大模型 1.5 Pro(Doubao-1.5-pro),该模型在多个测评基准上,包括知识、代码、推理和中文等方面,展现了优于 GPT-4o 和 Claude 3.5 ... 早报# 字节跳动# 豆包大模型 1.5 Pro 2周前0780
字节跳动推出新型单目深度估计方法Video Depth Anything:专门用于超长视频(数分钟)的高质量、一致的深度估计 字节跳动推出新型单目深度估计方法Video Depth Anything,专门用于超长视频(数分钟)的高质量、一致的深度估计。该方法基于 Depth Anything V2,通过引入高效的空间-时间头... 新技术# Video Depth Anything# 字节跳动 4周前0710
新型自动化 GUI交互模型 UI-TARS:能够通过感知屏幕截图作为输入,并执行类似人类操作的交互任务(如键盘输入和鼠标操作) 字节跳动与清华大学的研究人员推出新型自动化 GUI(图形用户界面)交互模型 UI-TARS,它是一种原生的 GUI 代理模型,能够通过感知屏幕截图作为输入,并执行类似人类操作的交互任务(如键盘输入和鼠... 多模态模型# UI-TARS# 字节跳动 2周前01020
字节跳动推出视频生成模型训练新方法APT:通过在扩散预训练的基础上对真实数据进行对抗训练,以实现一步视频生成 扩散模型在图像和视频生成领域展示了卓越的能力,但其迭代性质导致了生成过程缓慢且计算成本高昂。尽管现有的蒸馏方法尝试通过一步生成来解决这一问题,但往往伴随着显著的生成质量下降。为了解决这些挑战,字节跳动... 新技术# APT# Seaweed-APT模型# 字节跳动 1个月前0670
字节跳动推出新型图像分词器TA-TiTok及掩码生成模型MaskGen 字节跳动和浦项科技大学的研究人员提出了一种名为TA-TiTok的新型图像分词器。这是一种基于Transformer架构的文本感知一维分词器,能够高效处理离散或连续的一维标记。基于TA-TiTok的成功... 新技术# MaskGen# TA-TiTok# 字节跳动 1个月前0700
字节跳动发布通用图像编辑模型SeedEdit:已经在豆包PC端及即梦网页端开启测试 11月11日,字节在豆包大模型团队官网上公布最新通用图像编辑模型SeedEdit。SeedEdit支持一句话轻松改图,包括修图、换装、美化、转化风格、在指定区域添加删除元素等各类编辑操作,通过简单的自... 工具# SeedEdit# 即梦# 字节跳动 3个月前02160
字节跳动推出人像动画技术X-Portrait 2:创建富有表现力和逼真的角色动画和视频素材 人像动画技术提供了一种超低成本且高效的方式,用于创建富有表现力和逼真的角色动画和视频素材。用户只需提供一个静态人像图像和一个驱动表演视频,模型就可以使用这些输入生成视频,通过将驱动表情转移到人像中的主... 新技术# X-Portrait 2# 人像动画# 字节跳动 3个月前02210
字节推出TextToon:在实时环境中将真人的头像转换成卡通化的形象 罗切斯特大学和字节跳动的研究人员推出TextToon,它能够在实时环境中将真人的头像转换成卡通化的形象。就像魔法一样,这项技术可以把你从视频中的头像变成你想要的任何卡通风格,比如美国漫画风格、皮克斯动... 新技术# TextToon# 字节跳动 4个月前03670
字节跳动推出基于音频驱动人物肖像新框架Loopy:专门用于生成与音频同步的逼真人像视频 字节跳动和浙江大学的研究人员推出新型人工智能模型Loopy,它专门用于生成与音频同步的逼真人像视频。Loopy的核心特点是完全基于音频信号来驱动人像动作,而不需要额外的空间信号来辅助控制动作,这使得生... 新技术# Loopy# 人物# 字节跳动 6个月前03960
字节跳动推出AI音乐生成产品-海绵音乐 对于AI音乐,前面已经给大家介绍了Suno和Udio,字节跳动也在这一赛道发力,在昨天推出了AI音乐生成产品-海绵音乐,从目前生成效果来看,虽然还不如Suno和Udio,但对于中文歌曲生成效果还不错,... 工具# AI音乐# 字节跳动# 海绵音乐 7个月前04890