01 / 研究方向
什么是神经操作系统？
生成式计算的设想、交互状态，以及 NeuralOS 对操作系统界面仿真的建模。
三条阅读路线
先理解问题，再比较方法和证据。
从 NeuralOS 开始
从交互数据中学习计算机环境
首个预印本：2025-07-11 · 修订版：2026-03-12 · ICLR 2026
NeuralOS 研究 AI 操作系统和下一代 GUI 的生成式计算方向。它从用户输入与屏幕序列中学习一个可交互的计算机环境，结合循环状态跟踪与扩散渲染器，根据鼠标移动、点击和键盘事件预测下一帧屏幕图像。仿真过程中，底层应用程序并不实际运行。
2025 年的原始论文定义了这一建模问题，提出状态跟踪、精确交互、训练方法与数据采集系统，并讨论可适应的生成式界面这一更广泛的方向。2026 年修订版还展示了从合成示范中学习新的模拟应用。
媒体报道：量子位报道 ·
模拟环境与操作计算机的智能体
GUI 智能体观察屏幕、选择操作，并把操作交给真实应用。GUI 世界模型预测操作之后的变化。NeuralOS 学习的是环境：它根据输入生成后续桌面画面。预测文本变化的 Web Agents with World Models、预测移动屏幕的 ViMo，以及生成可渲染界面代码的 Code2World，提供了不同的预测表示与规划方法。
NeuralOS 与 Genie 都研究可交互的生成环境。Genie 从没有动作标签的视频中学习潜在动作；NeuralOS 使用明确的鼠标与键盘事件学习桌面交互。两者的控制方式、训练数据与评测设置不同。阅读方法比较与原始来源 →