我们希望能够搭建一个AI学习社群,让大家能够学习到最前沿的知识,大家共建一个更好的社区生态。
https://www.feishu.cn/community/article/wiki?id=7355065047338450972
点击「订阅社区精选」,即可在飞书每日收到《大模型日报》每日最新推送
学术分析报告:ResearchFlow — 奇绩F23校友的开发的深度研究产品,PC端进入RFlow的分析报告,可直接点击节点右侧的小数字展开节点,登录后可在节点上直接“询问AI”,进一步探索深度信息
如果想和我们空间站日报读者和创作团队有更多交流,欢迎扫码。
欢 迎 大 家 一 起 交 流 !
叶添 :揭秘大语言模型推理机制——超越人类的二级推理
奇绩潜空间活动报名
【奇绩潜空间】 是 GenAI 时代冲得最快的一批科研学者/从业者/创业者聚集的 AI 人才社 区,潜空间定期邀请大模型前沿创业者分享产品实践探索,邀请前沿科研学者分享最新技术进展。
第五季第二期潜空间邀请到的嘉宾是 清华大学姚班,卡内基梅隆大学博士生,Physics of LLM 2.1作者,于 Meta 担任 Research Scientist Intern 的 叶添 ,在本次活动中叶添将在北京现场与大家面对面交流,他分享的主题是《 揭秘大语言模型推理机制——超越人类的二级推理 》。
资讯
强化学习之父 Rich Sutton 最新演讲:用「去中心化神经网络」应对深度学习局限性
作者以DAI 2024会议为背景,探讨了人工智能领域的前沿进展和挑战。现代强化学习奠基人Richard S. Sutton教授在开幕演讲中提出,当前人工智能面临深度学习的局限性,包括灾难性遗忘、可塑性丧失和模型坍塌等问题,这限制了持续学习的实现。Sutton教授介绍了“去中心化神经网络”的新概念,主张赋予每个神经元独立目标以增强网络适应性和持续学习能力。他还提出“持续反向传播”算法,通过动态调整神经元状态,显著改善了深度学习模型在长期任务中的表现。
作者强调,深度学习在持续学习中表现出严重的可塑性丧失,而持续反向传播等方法展示了解决这一问题的潜力。此外,阿尔伯塔大学的流算法研究突破了深度强化学习在流式在线设置中的性能瓶颈,为构建更高效的持续学习系统提供了新思路。
会议还涵盖了多智能体系统、深度学习、博弈论和LLM推理等领域,展示了NeurIPS、ICLR等顶会的高质量成果。作者指出,这些研究为解决深度学习的现存问题提供了新的视角,同时预示了人工智能持续发展的可能路径。
《中国AI算力行业发展报告》
数字经济成为全球经济增长的活力所在。2022年,全球51个主要经济体数字经济同比名义增长7.4%,高于同期GDP名义增长3.2%,持续为全球经济平稳回升注入动力。数字经济快速发展推动数字基础设施建设优化加速,算力作为重要的数字基础设施,算力结构不断调整。
全球算力主要由通用算力、智能算力和超算算力组成。通用算力作为基础,满足广泛的日常计算需求;智能算力则在新兴技术领域发挥关键作用;超算算力针对特定高端需求提供强大计算能力。数据显示,2023年底全球算力总规模约910 EFLOPS,其中,智能算力从2021年的113 EFLOPS增长至2023年的335 EFLOPS,增长速度最快。
《2024具身智能科技前沿热点》
中关村智友研究院与青年科学家50人论坛联合编写的《2024具身智能科技前沿热点》正式发布。该报告深度揭晓了过去一年中具身智能领域所迎来的六大科技前沿热点,具体包括具身智能灵巧操作大模型、空间智能、人形机器人、大规模仿真训练平台、触感灵巧手、具身智能导航大模型等。
推特
00 Arxiver开源:包含 138,830 篇 arXiv 论文的多Markdown格式
Chatbot Arena 更新:o1上升至并列第一名,Deepseek-V3成为前十唯一开源模型
来自 Chatbot Arena 的激动人心的消息 ❤️🔥
@OpenAI 的 o1 上升至并列第1名(相比 o1-preview 提升了24分),而 @deepseek_ai 的 DeepSeek-V3 位列第7,现在成为前十中表现最佳且唯一的开源模型!
• 前十中性价比最高的模型($0.14/百万输入token)
祝贺两者取得如此非凡的成就!期待在2025年看到更多突破!更详细的分析请看帖子👇
https://x.com/lmarena_ai/status/1873695386323566638
奥特曼:OpenAI 即将推出的许多重大更新几乎没有被“大家期待OpenAI2025年构建什么”提及
(有趣的是,我们即将推出的许多重大更新几乎没有被提及!)
“你希望OpenAI在2025年构建/改进什么?”
https://x.com/sama/status/1873816979590787110
Kling AI API新增“虚拟试穿 V1.5”和“唇同步”
📢 KLING AI API 新增功能:“虚拟试穿 V1.5”和“唇同步”!观看视频,了解如何通过这些功能解锁更多创意可能性!
我们诚挚欢迎个人开发者和企业用户尝试这一最新更新 ❤️
https://x.com/Kling_ai/status/1873661753483202727
被奥特曼称赞为爱因斯坦的Radford被爆料只用 Jupyter Notebook 编码
奥特曼:很难夸大 Alec Radford 对这个领域的贡献,以及当下所有人的进步有多大程度可以追溯到他的工作。
我相信他是像爱因斯坦那样的天才,同时他也是我最喜欢的人之一——很难想象有谁能比他更友好、更温暖、更体贴。
他非常谦虚,知名度并没有达到他应得的程度,虽然我确定他本人并不在意。
我对他为 OpenAI 所做的一切心怀感激,并非常期待未来能以独立研究员的身份与他合作——我认为这将非常符合他的风格。
Zach Dive转发:关于 Alec 的一个趣闻:他只用 Jupyter Notebook 编码,然后由研究工程师把代码转译。他的目标是探索,而不是执行。
Jeremy Howard吐槽:软件工程经理:Jupyter Notebook 根本不能用来做真正的工作。
Alec Radford:我在 Jupyter Notebook 里发明了 GPT 和 CLIP。
https://x.com/jeremyphoward/status/1873860513920364660
Taelin分享:重构大型代码库最好的方式是将代码库拆分成小块,并将每个块同时发送给约 500 个 DeepSeek 实例
单独完成这个任务很简单,可以完全由 Sonnet 自动化完成,对吧?
问题是:如果代码库太大,AI 的上下文容量装不下,而 RAG 解决方案或类似 Cursor 的编辑器又无法精准定位需要编辑的部分(因为需要一些语义推理),该怎么办?难道要退回到人工编码,像古代玛雅人那样?
我们将代码库拆分成小块,并将每个块同时发送给约 500 个 DeepSeek 实例(!)。每个实例会决定该代码块是否需要编辑。这样可行的原因是 DeepSeek 足够聪明、快速且便宜。
最后,将需要编辑的代码块集中发送给 Sonnet,通过一个提示处理,让其正常工作。整个过程不到一分钟,成本低,效率高。最后我们通过 git diff 进行人工复查。
简而言之,AI 已经进入了类似 grep 搜索与替换的时代。因为这个脚本看起来像是在代码库中丢下一颗炸弹,我称它为 AoE(效果范围攻击),它已发布在 VictorTaelin/AI-Scripts 中。尽情享用吧!
https://x.com/VictorTaelin/status/1873948475299111244
通过诺基亚使用AI助手?EXOLabs分享:通过短信发送指令到 AI 家庭集群
通过坚不可摧的诺基亚 3310 控制我的 AI 助手
直接通过短信发送指令到 AI 家庭集群,访问我的所有文件、邮件、日历和其他应用程序。
https://x.com/exolabs/status/1873899591915254001
产品
Cobalt 内容存储解决方案
Cobalt 是一款简洁高效的工具,让您随时保存喜爱的内容,无需担心广告、跟踪、付费墙或其他干扰。只需粘贴链接,即可轻松获取纯净的阅读体验。无论是文章、视频还是图片,Cobalt 都能为您提供无杂质的内容存储解决方案,让您专注于重要的事物。简单、安全、自由,Cobalt 是内容保存的全新方式,让互联网回归本质。
SWIB 成长历程分享
Swib 是一个专为创作者、开发者和创新者打造的平台,让他们可以轻松展示自己的项目和成长历程。通过分享项目故事,不仅可以获得更多关注,还能激励他人,共同推动创新发展。
如图片所示,Swib 的界面直观简洁,用户可以展示自己的作品,包括已完成的项目和正在开发中的计划。例如,用户可以标注项目状态(如“Building”或“Completed”),让访客清晰了解他们的进展和成就。此外,Swib 提供了个人档案页面,方便用户突出自己的职业背景和联系方式,增强社群互动。
Swib 不仅是一个展示平台,更是一个激发灵感、促进合作的社区。在这里,创作者可以交流经验,吸引潜在的合作者和投资者,开启更多可能性。
https://www.swib.in
投融资
Run:ai 加入 NVIDIA:新篇章的开始
Run:ai 官方宣布,已经完成加入 NVIDIA 团队的过程,这标志着 Run:ai 发展历程中的一个重要篇章的结束,同时也是进入新阶段的开始。
Run:ai 表示,尽管品牌色从粉色变为绿色,但其对客户、合作伙伴以及整个 AI 生态系统的承诺将不变。作为 NVIDIA 的一部分,Run:ai 将继续致力于优化 AI 基础设施,并为全球用户提供灵活、高效的 GPU 系统解决方案。这些解决方案不仅限于本地部署,还包括通过原生解决方案和与领先云服务提供商 (CSP) 合作的 NVIDIA DGX Cloud 提供的云服务。
此次收购的一个关键变化是,Run:ai 将开源其软件。这一举措将使得 Run:ai 的软件不仅适用于 NVIDIA 的硬件,也能够扩展到整个 AI 生态系统中,包括其他竞争对手的硬件。Run:ai 认为,通过开源,能够帮助社区更快、更好地构建 AI 应用。
自 2018 年成立以来,Run:ai 一直致力于推动 AI 基础设施的高效管理,帮助组织充分发挥其 AI 系统的潜力。随着加入 NVIDIA,Run:ai 希望能在现有成就的基础上继续壮大,并共同推动 AI 和加速计算技术的变革。NVIDIA 和 Run:ai 的合并被认为是推动全球 AI 创新的关键一步。
这项收购也表明了 NVIDIA 对 AI 基础设施市场的持续关注,进一步巩固了其在加速计算领域的领导地位。Run:ai 的创始人感谢所有支持过公司发展的团队、投资者、客户和合作伙伴,期待在加入 NVIDIA 后继续实现更大的突破。
https://www.run.ai/blog/run-ai-joins-nvidia
2024年11月全球AIGC投融资报告
2024年11月,全球AIGC行业融资总额达997亿元,环比增长37%,呈现强劲增长势头。其中,xAI以60亿美元(约合431亿元人民币)的融资额位居全球单月融资榜首,吸引了包括A16Z、红杉资本、英伟达和AMD在内的多家知名机构参与。在全球范围内,Y Combinator成为最活跃的投资机构,参与了4次投资;国内方面,启迪之星、顺禧基金和百度各投资3次。
11月国内AIGC赛道表现活跃,共有70家企业获得投资,其中7家公司融资金额超亿元,包括银河通用、呈元科技等。国内融资的重点领域集中在模型层,占比57.25%,应用层次之占比27.20%。生产力工具在国内应用层投资中占比最高,达30.32%。
截至2024年11月底,全球AIGC行业累计融资总额达4431亿元,国内融资金额约为390亿元,占全球融资总额的8.8%。美国以3442亿元的融资额领跑全球,融资次数达375次。国内月之暗面和MiniMax分别以13亿美元和6亿美元的融资位居国内单笔融资金额榜前列。
全球融资趋势显示,第二季度融资事件大幅增长,年内两波融资高峰分别出现在5月和10月,主要得益于xAI、OpenAI等大模型企业的巨额融资支持。11月,尽管融资次数有所回落,但热度依旧不减。
国内AIGC融资活动全年呈现稳步上升趋势,11月融资次数创年内新高,环比增长77%。从机构角度,奇绩创坛成为国内最活跃的投资方,年内投资29次,涵盖多个AIGC领域。整体来看,国内赛道在融资金额和技术分布上与全球趋势接轨,同时展现出较高的市场活跃度和细分领域增长潜力。
— END —
快速获得3Blue1Brown教学动画?Archie分享:使用 Manim 引擎和 GPT-4o 将自然语言转换为数学动画
原创文章,作者:LLM Space,如若转载,请注明出处:https://www.agent-universe.cn/2024/12/29531.html