探索视觉、语音、生成媒体、机器人和科学应用，适合领域学习者与研究者。
115 条精选 · 7 个细分主题
学习图像、视频与多模态信息的理解和推理，适合视觉应用开发者。
SoMarkAI/OXR
这是一个 GitHub 开源项目，提供名为 OXR（Optical Everything Recognition）的文档解析模型，目标是将 PDF 和文档图像转换为便于智能体使用的数据。项目介绍称其在后训练中使用 RSI 循环，具备较高的准确率和速度，并给出在线演示、免费 API 以及 Hugging Face 和 ModelScope 上的模型入口；README 提供英文和简体中文版本。
Object Detection for Dummies Part 1: Gradient Vector, HOG, and SS
Lilian Weng 的“Object Detection for Dummies”系列第一篇，介绍目标识别与检测之前的基础图像处理概念与图像分割方法，包括图像梯度向量、常见图像处理核、方向梯度直方图（HOG）、Felzenszwalb 图像分割算法，以及选择性搜索及其配置变化。文中说明本部分不涉及深度神经网络，深度学习检测模型留待第二、三部分。
Introducing Gemma 4 12B: a unified, encoder-free multimodal model
Google DeepMind 发布 Gemma 4 12B，定位为可直接在笔记本电脑上运行智能体式多模态能力的模型，介于轻量 E4B 与 26B MoE 之间，内存占用更小，是其中等规模模型中首个支持原生音频输入的。文章称其采用无多模态编码器的统一架构，视觉和音频输入直接进入 LLM 主干，并提到 Gemma 4 系列累计下载量已超过 1.5 亿次。
学习扩散、流匹配和图像生成编辑，适合生成模型研究者与图像创作者。
From GAN to WGAN
这篇博客从博弈论视角讲解生成对抗网络（GAN），先用 KL 与 JS 散度铺垫，推导判别器的最优值和全局最优，解释损失函数的含义，再讨论 GAN 训练中的问题（难以达到纳什均衡、低维支撑、梯度消失、模式崩塌、缺乏合适评价指标）和改进训练方法。最后介绍 Wasserstein GAN，包括 Wasserstein 距离的定义、相比 JS/KL 散度的优势，以及将其用作 GAN 损失函数，并附有生成宝可梦图像的示例。文中注明该文有韩文译本并发布在 arXiv 上。
From Autoencoder to Beta-VAE
Lil'Log 博客梳理自编码器及其变体的文章。依次介绍普通自编码器、去噪、稀疏和收缩自编码器，然后重点讲变分自编码器 VAE（ELBO 损失与重参数化技巧）、Beta-VAE，以及后续加入的 VQ-VAE、VQ-VAE-2 和 TD-VAE 章节，附符号表。
Flow-based Deep Generative Models
Lil'Log 博客关于流模型（flow-based generative models）的文章。先对比 GAN、VAE 与流模型的区别，回顾雅可比矩阵、行列式与变量变换定理，再介绍归一化流（Normalizing Flows）及 RealNVP、NICE、Glow，以及基于自回归流的 MADE、PixelRNN、WaveNet、掩码/逆自回归流，最后提到 VAE + Flows 的组合。
学习视频、三维资产和角色动作生成，适合媒体创作者与图形开发者。
Introducing Gemini Omni
Google DeepMind 介绍 Gemini Omni 模型，称其可从任意输入生成内容，首先支持视频。Omni 可组合图像、音频、视频和文本作为输入，生成基于 Gemini 世界知识的高质量视频，并支持通过对话式自然语言编辑视频、保持角色与场景一致性。首个模型 Gemini Omni Flash 已在 Gemini 应用、Google Flow 和 YouTube Shorts 上线，后续将支持图像和音频输出。
How are people making those insane graphic motions video that I keep seeing on instagram using claude ?
Reddit r/ClaudeAI 上的社区帖子。发帖者称在 Instagram 上看到许多高水准动效视频都声称用 Claude 制作，但自己让 Claude 生成同类视频时效果不如这些作品，于是询问具体做法，并提到看到一条标注“Claude + Katana”（Katana 来自 higgsfields）的视频，询问这是否是可行路径。帖子下附带自动生成的讨论摘要。适合对用 Claude 制作动效/视频内容、并关注他人工作流的人关注。
开源 AI 视频 Agent，把编码 Agent（如 Codex、Claude Code）变成视频 Agent。影片以 HTML 网页形式写成，由名为 Studio 的浏览器本地编辑器呈现并可手工或通过提问修改；每幕是一个用 frame(t) 函数绘制画面的网页，可组合动画网页、素材、图片和声音。
学习语音识别、合成、音乐生成与实时语音智能体，适合音频应用开发者。
台湾大学李宏毅教授的个人主页，当前页面标注的学期为 2026 春。页面包含他的简介（台大硕士与博士，2012–2013 年在中央研究院资讯科技创新研究中心做博士后，2013–2014 年访问 MIT CSAIL 口语系统组）、研究方向（交互式检索强化学习、风格可控聊天机器人、无监督语音识别、口语内容检索与理解、口语问答）以及办公室、实验室和邮箱等信息。
Musicians Coding AI for Themselves
这是一本由 Taylor & Francis 出版的开放获取图书，作者为 Basica, Constantin 与 Zhu, Julie，出版信息只给到 2026 年。书中结合学术研究与音乐人实际经验，讨论音乐与 AI 的交汇，由新兴的“编程音乐人”作者撰写各自的艺术实践与研究，内容涉及算法作曲、共创系统、神经网络与 AI 伦理，并收录对已将 AI 用于创作的音乐人的访谈。
Introducing OpenAI Presence
OpenAI 于 2026 年 7 月 22 日发布的产品公告，介绍 OpenAI Presence：一个面向企业的 AI 智能体平台，帮助组织在客户与内部工作流程中部署可信的语音和聊天智能体。页面说明该产品当日即可用于语音和聊天智能体。
学习世界模型、具身智能与机器人控制，适合物理 AI 学习者和研究者。
Europe’s Industrial Leaders Reinvent Engineering and Manufacturing With NVIDIA
这是 NVIDIA 博客文章，介绍欧洲工业企业将 NVIDIA CUDA-X、Omniverse 库以及 Cosmos、Nemotron 开放模型用于工程与制造全流程。文中提到 NVIDIA Factory Operations Blueprint（FOX）已在 GitHub 开放早期访问，供开发者构建协调机器作业的工厂管理智能体和视觉检测、根因分析、报告生成、车队管理等专用智能体；西门子正将基于 FOX 构建的智能体集成进其 Intelligence Center X，并称预计可节省约 20% 成本。适合关注工业智能体与制造业数字化的读者。
NVIDIA Open Models Advance Europe’s Sovereign Intelligence Across Industries
英伟达博客文章介绍其扩展中的开放模型系列，覆盖语言、机器人、生物和量子计算等方向。文中列举了 Nemotron 3.5 Super VL、Nemotron 3.5 Bolt、Nemotron Retriever、Kumo 系列、Cosmos 3.5、Alpamayo 2 Edge、BioNeMo 和 Ising 等模型，并称这些模型可让机构用本地数据定制、部署在自有基础设施上。文中还提到 Nemotron 模型由包含 Black Forest Labs、H-Company、Mistral 等欧洲伙伴的 Nemotron 联盟提供数据与研究支持。
Genie 4: A new generation of world simulation
谷歌 DeepMind 发布世界模型 Genie 4 的博客，作者为 Raia Hadsell、Diego Rivas 和 Hang Qi。文中称该模型原生多模态，可在生成世界的同时生成音乐、环境声和交互对话，并借助 Gemini 系列模型（如 Gemini Omni）维持模拟的真实外观与连贯性，可用于机器人和智能体的训练环境以及交互式体验，页面提供候补名单申请。
探索 AI 科研、生命科学和医疗应用，适合科研人员与领域学习者。
Claude Science, an AI workbench for scientists
文章介绍 Claude Science，一个面向科学家的 AI 工作台应用。它整合研究人员常用工具和软件包，产出可审计的工件，并提供灵活的计算资源访问；文中提到科研常需跨多个数据库和 PubMed、Jupyter、R、集群终端等工具切换，该应用旨在把这些分散的工具集中起来。适合科研人员和对 AI 科研工具感兴趣的读者。
Using AI to help physicians diagnose rare genetic diseases affecting children
OpenAI 2026 年 6 月 18 日发布的应用 AI 类文章，介绍一项发表于 NEJM AI 的研究：专家使用 OpenAI 的推理模型重新分析 376 个此前未解决的病例，为 18 个诊断提供线索。页面附有该研究摘要的链接。
Uncovering repurposed medicines to fight liver fibrosis
Google DeepMind 博客文章（2026 年 5 月 19 日），介绍斯坦福大学医学院遗传学家 Gary Peltz 使用 Co-Scientist 寻找肝纤维化治疗药物的研究。研究发表于 Advanced Science：Peltz 让 Co-Scientist 提出三个候选药物并说明理由，同时自己选出两个，再用活体人类肝细胞测试；他自己选的两个无效，Co-Scientist 所选药物中有两个阻断了纤维化并促进肝细胞再生。
学习 AI 数学推理、定理证明与 Lean 形式化，适合数学和形式化方法爱好者。
AI Is Getting Good at Math. Here’s Why.
文章列举了 2026 年一系列 AI 数学成果：OpenAI 内部模型找到 Erdős 单位距离猜想的反例、发表 Cycle Double Cover 证明、解决另外十个开放问题、给出 Navier-Stokes 证明；Anthropic 发布费马大定理形式化及黎曼猜想的新界。作者提出能否预测模型会解决哪类问题的议题，用“若干提示/洞见加上其间的努力”这一心智模型衡量问题复杂度，并引述 WT Gowers 对单位距离证明的评论。关注 AI 数学推理能力与问题难度分析的读者可读。
An OpenAI model has disproved a central conjecture in discrete geometry
这是 OpenAI 于 2026 年 5 月 20 日发布的文章，介绍一个内部 OpenAI 模型在平面单位距离问题上取得突破。该问题由 Paul Erdős 于 1946 年提出，问的是在平面放置 n 个点时最多有多少对点恰好相距 1。文中称，长期以来人们认为“方格”构造基本最优，而该模型推翻了这一猜想，给出了一族无穷多的构造，文章将其称为 AI 驱动数学的一个里程碑。
Mathematics Just Changed Forever — Kevin Hartnett
这是一个围绕 Kevin Hartnett 著作《The Proof in the Code》制作的纪录片式访谈视频。内容从 1998 年 Thomas Hales 计算机辅助证明开普勒猜想、Annals of Mathematics 无法判定其正确性讲起，讲述 Lean 从微软研究院的副项目发展为数学界用于校验证明的系统，并采访了 Lean 创建者 Leonardo de Moura、Jeremy Avigad、Kevin Buzzard 等人。后半部分转向 AI，涉及 AlphaProof、自然语言奥赛证明、自动形式化，以及“形式化鸿沟”这一概念。