Generative Video WorldSim, Diffusion, Vision, Reinforcement Learning and Robotics — ICML 2024 Part 1
内容涵盖了2024年ICML大会的一些重要技术讨论,重点涉及生成性视频模型、扩散模型、计算机视觉、强化学习以及机器人技术等前沿话题。文章中首先介绍了OpenAI的Sora模型,该模型结合了Diffusion Transformers技术,展示了如何通过特定的归纳偏差在生成视频领域取得显著的进展。Bill Peebles在ICML上的报告详细讲解了Sora的架构和应用,并提出了该模型在引入这些偏差时所面临的挑战。Google DeepMind在视频生成领域也表现突出,带来了两篇获奖论文:“Genie: Generative Interactive Environments”和“VideoPoet: A Large Language Model for Zero-Shot Video Generation”,展示了通过大型语言模型生成视频的零样本能力,这标志着视频生成技术迈向了新的高度。文章进一步探讨了扩散模型在生成任务中的应用,Sander Dieleman的报告强调了扩散模型在频域中的回归应用,这为图像和视频生成提供了新的思路。另外,文章提到了一些流匹配(Flow Matching)技术的进展,特别是在高分辨率图像合成中的应用,Stable Diffusion 3便是其中的一个重要实例。Ben Poole介绍了如何通过2D先验推断3D结构,结合NeRFs和DreamFusion技术,推动了计算机视觉的边界。在机器人领域,Chelsea Finn的四场报告则聚焦于如何利用视频数据训练机器人,并发展出了具有自主适应能力的机器人通用智能。她提出,机器人领域的进展可以为机器学习带来新的见解,特别是在如何将视频和视觉语言模型结合起来进行行为生成和任务执行方面。https://www.latent.space/p/icml-2024-video-robots
推特
0100Arxiver开源:包含 138,830 篇 arXiv 论文的多Markdown格式
ChatGPT 现已集成到 iOS、iPadOS 和 macOS 的 Apple 体验中
ChatGPT 现已集成到 iOS、iPadOS 和 macOS 的 Apple 体验中,用户可以直接在操作系统中使用 ChatGPT 的功能。
BLENDERGPT 现已全面上线,无需等待名单。生成 3D 资产从未如此简单。以下是我在短短一分钟内完成整个 3D 场景的展示。立即免费试用,访问:blendergpt.org
https://x.com/gd3kr/status/1866910744601825666
产品
01
AISmartCube 低代码平台开发
AISmartCube 是您的低代码平台,致力于构建、自动化和优化 AI 工具与助手。通过访问丰富的预制解决方案库,您可以轻松地选择适合的模块来满足不同需求,无需从零开始开发,显著降低技术门槛。平台还支持流畅的工作流程自动化,将繁琐的任务一键简化,让您的日常操作更加高效。此外,AISmartCube 提供公共知识库的无缝集成功能,使您的 AI 工具和助手拥有更强大的知识支持和推理能力,从而更智能地完成复杂任务。不论您是初创企业、企业团队,还是个人开发者,AISmartCube 都是您创新与效率提升的最佳助手,让 AI 工具的创建变得前所未有的简单!https://aismartcube.com/?ref=producthunt02
Albert Invent,致力于通过人工智能平台变革化学行业,最近成功完成了由 Coatue 主导的 2250 万美元 A 轮融资。该公司提供的 AI 平台,名为 Albert Breakthrough,能够基于过去化学实验的数据帮助化学家们在制定化学品时进行分子级的数据分析。平台结合了结构化数据和公司专有的 AI 模型,旨在加速化学产品的开发,提升产品质量。其核心能力包括实时生成毒理学预测,并且在许多标准行业模型中表现优异。Albert Invent 的客户包括 Chemours、Solenis、Keystone Industries、Applied Molecules、Henkel 和 Nouryon 等知名化学公司。公司 CEO 兼联合创始人 Nick Talken 表示,Albert Breakthrough 是一种 SaaS 产品,已经被全球最大的化学公司用于重新定义化学科学,并为可持续性问题和个性化医疗设备等提供解决方案。该平台的成功不仅得益于其 1500 万化学分子数据的训练基础模型,还依赖于从公共化学数据中构建的深度学习模型。在此前的融资中,Albert Invent 已获得了来自 Index Ventures 的种子轮投资(2022 年底)。此次 A 轮融资的其他参与者还包括 TCV、Index Ventures、F-Prime 和 Homebrew。David Schneider,Coatue 的普通合伙人表示,支持 Albert Invent 是因为它通过最新的 AI 技术带来化学研究的高效性和商业效益。Nouryon 的首席技术官 Johan Landfors 也表示,Albert Breakthrough 已成为其产品开发的关键工具。公司官网:https://www.albertinvent.com/https://techcrunch.com/2024/12/11/albert-invent-hopes-to-revolutionize-the-chemicals-sector-with-its-ai-platform/02