字节跳动推出统一的视频生成框架Phantom :通过跨模态对齐实现主体一致性的视频生成 字节跳动的研究人员推出一个统一的视频生成框架Phantom ,通过跨模态对齐实现主体一致性的视频生成(Subject-to-Video, S2V),用于单主体和多主体参考,构建在现有的文本到视频和图像... 新技术# Phantom# 字节跳动# 视频生成 3天前0110
字节跳动推出基于修正流Transformer 架构的新型图像和视频生成模型家族Goku 香港大学和字节跳动的研究人员推出新型图像和视频生成模型家族Goku,它基于修正流Transformer 架构,实现了行业领先的图像和视频联合生成性能。Goku 的目标是通过高质量的视觉内容生成,推动媒... 视频模型# Goku# 字节跳动# 视频生成 2周前0570
字节跳动推出新型蒸馏模型Hyper-SD:基于SD1.5和SDXL1.0基础模型提炼 字节跳动在推出文生图模型SDXL-Lightning后,又推出了新的蒸馏模型Hyper-SD,它有效地结合了ODE轨迹保留和重构的优点,同时在步骤压缩过程中保持了接近无损的性能。与SDXL-Light... 图像模型# Hyper-SD# 字节跳动# 蒸馏模型 2周前09870
字节跳动推出AnimateDiff-Lightning模型:根据文本描述生成视频,还可以视频转视频 字节跳动推出了AnimateDiff-Lightning模型,能够更快地根据文本描述生成视频,比起原来的AnimateDiff模型,速度提升十倍以上。 模型地址:https://huggingface... 视频模型# AnimateDiff-Lightning# 字节跳动 2周前04510
新型自动化 GUI交互模型 UI-TARS:能够通过感知屏幕截图作为输入,并执行类似人类操作的交互任务(如键盘输入和鼠标操作) 字节跳动与清华大学的研究人员推出新型自动化 GUI(图形用户界面)交互模型 UI-TARS,它是一种原生的 GUI 代理模型,能够通过感知屏幕截图作为输入,并执行类似人类操作的交互任务(如键盘输入和鼠... 多模态模型# UI-TARS# 字节跳动 2周前01030
字节跳动发布豆包大模型 1.5 Pro,性能超越 GPT-4o 和 Claude 3.5 Sonnet 字节跳动今日正式发布了其最新的豆包大模型 1.5 Pro(Doubao-1.5-pro),该模型在多个测评基准上,包括知识、代码、推理和中文等方面,展现了优于 GPT-4o 和 Claude 3.5 ... 早报# 字节跳动# 豆包大模型 1.5 Pro 2周前0790
字节跳动推出新型单目深度估计方法Video Depth Anything:专门用于超长视频(数分钟)的高质量、一致的深度估计 字节跳动推出新型单目深度估计方法Video Depth Anything,专门用于超长视频(数分钟)的高质量、一致的深度估计。该方法基于 Depth Anything V2,通过引入高效的空间-时间头... 新技术# Video Depth Anything# 字节跳动 4周前0710
字节跳动推出视频生成模型训练新方法APT:通过在扩散预训练的基础上对真实数据进行对抗训练,以实现一步视频生成 扩散模型在图像和视频生成领域展示了卓越的能力,但其迭代性质导致了生成过程缓慢且计算成本高昂。尽管现有的蒸馏方法尝试通过一步生成来解决这一问题,但往往伴随着显著的生成质量下降。为了解决这些挑战,字节跳动... 新技术# APT# Seaweed-APT模型# 字节跳动 1个月前0670
字节跳动推出新型图像分词器TA-TiTok及掩码生成模型MaskGen 字节跳动和浦项科技大学的研究人员提出了一种名为TA-TiTok的新型图像分词器。这是一种基于Transformer架构的文本感知一维分词器,能够高效处理离散或连续的一维标记。基于TA-TiTok的成功... 新技术# MaskGen# TA-TiTok# 字节跳动 1个月前0710
字节跳动推出人像动画技术X-Portrait 2:创建富有表现力和逼真的角色动画和视频素材 人像动画技术提供了一种超低成本且高效的方式,用于创建富有表现力和逼真的角色动画和视频素材。用户只需提供一个静态人像图像和一个驱动表演视频,模型就可以使用这些输入生成视频,通过将驱动表情转移到人像中的主... 新技术# X-Portrait 2# 人像动画# 字节跳动 3个月前02210
字节跳动发布通用图像编辑模型SeedEdit:已经在豆包PC端及即梦网页端开启测试 11月11日,字节在豆包大模型团队官网上公布最新通用图像编辑模型SeedEdit。SeedEdit支持一句话轻松改图,包括修图、换装、美化、转化风格、在指定区域添加删除元素等各类编辑操作,通过简单的自... 工具# SeedEdit# 即梦# 字节跳动 3个月前02170
字节推出TextToon:在实时环境中将真人的头像转换成卡通化的形象 罗切斯特大学和字节跳动的研究人员推出TextToon,它能够在实时环境中将真人的头像转换成卡通化的形象。就像魔法一样,这项技术可以把你从视频中的头像变成你想要的任何卡通风格,比如美国漫画风格、皮克斯动... 新技术# TextToon# 字节跳动 4个月前03670