Oasis是Decart和Etched合作推出的革命性AI技术,是世界上首个实时AI世界模型,能以每秒20帧的速度实时生成交互式视频内容,无延迟。Oasis开启“生成式交互体验”的新纪元,支持用户基于文字或语音命令控制游戏进程,为数字内容消费和娱乐方式带来无限可能。Oasis展示了AI在物理理解方面的能力,玩家能在游戏中进行移动、跳跃、建造和破坏等操作。Oasis预示着由AI驱动的个性化内容新时代的到来,对游戏、教育、娱乐和社交等多个领域产生深远影响。
Oasis的主要功能实时视频内容生成:Oasis能以每秒20帧的速度实时生成交互式视频内容,提供流畅的游戏体验。交互式控制:用户基于键盘和鼠标输入,甚至文字或语音命令控制游戏进程,实现高度互动。物理世界模拟:Oasis展示物理理解能力,支持玩家在游戏中进行移动、跳跃、建造和破坏等操作,模拟真实世界的物理规则。开放世界探索:作为开放世界游戏,Oasis支持玩家自由探索全新生成的地图和环境。内容个性化:基于AI模型,Oasis能根据用户的喜好和行为即时创建个性化内容。Oasis的技术原理模型架构:Oasis基于Transformer的模型架构,包括Diffusion Transformer骨干网络和Transformer-based autoencoder,是专为快速自回归交互式视频生成而设计的。低延迟设计:Decart团队推出能实现低动作到帧延迟的模型架构,系统能快速响应玩家的输入。硬件优化:Oasis针对特定的GPU和服务器硬件架构进行专有系统优化,实现更高效的性能。Sohu芯片:Oasis将在Sohu芯片上运行,是Etched即将推出的专为处理大规模视频模型而设计的ASIC(专用集成电路),能支持4K分辨率下运行超过1000亿参数的模型。Oasis的项目地址项目官网:oasis-model.github.ioGitHub仓库:https://github.com/etched-ai/open-oasisHuggingFace模型库:https://huggingface.co/Etched/oasis-500m在线体验Demo:http://oasis.decart.aiOasis的应用场景视频游戏:提供全新的游戏体验和无限可能的游戏环境。教育和培训:创造模拟环境进行技能培训和提供互动式学习体验。虚拟旅游和探索:支持用户探索虚拟世界和提供安全的探险体验。电影和娱乐:实时生成电影场景和创建互动式电影。社交互动:开发虚拟社交平台和提供增强现实社交体验。
上一篇