sideOS：能看懂屏幕并操作应用的 Mac AI 助手

sideOS 是一款能理解屏幕内容并执行操作的 Mac AI 助手。你可以用语音交代任务，让它打开应用、点击按钮、输入文字、整理资料，也可以只用本地听写把话写进当前输入框。它适合希望减少复制粘贴和跨应用重复操作的 Mac 用户，由 Stockimg AI, Inc. 开发与销售。

通俗解释：sideOS 是做什么的？

可以把 sideOS 理解为住在 Mac 屏幕顶部刘海区域的工作助手：你告诉它“把这个网页总结成一条备忘录”，它会读取当前页面，再通过可用工具执行相关操作。官网是产品介绍、下载、购买授权和获取帮助的入口，实际工作在安装到 Mac 上的应用中完成。

它有两条需要分清的使用路径。智能体模式理解目标并操作应用，例如根据当前邮件准备回复、把资料整理进笔记；听写模式负责将说话内容变成文字，输入到光标所在的位置。如果你只想把一句话打出来，用听写；如果想让电脑继续完成一件事，用智能体。输入文字、发送信息和完成任务之间，仍应检查实际结果。

从屏幕内容出发，执行跨应用任务

sideOS 优先通过 macOS 辅助功能树读取按钮、文本框和窗口内容，再调用打开应用、点击、键盘输入、快捷键和 AppleScript 等工具。因此，同一条指令可以围绕浏览器、邮件、备忘录和日历等现有应用展开，不必先把材料逐段复制到一个聊天网页。

遇到图表、图片或视频画面时，可以在发出请求时框选屏幕区域，把具体对象交给助手分析；截图属于必要时的视觉补充，不能据此认为任何界面都能被无误识别。对于 PDF、图片、Markdown、CSV、JSON 或代码文件，也可以拖到顶部区域后提问。提取结果应与原始文件核对，尤其是数字、日期和代码。

如果需要接入工作服务，sideOS 支持 HTTP、stdio 和 OAuth 方式的 MCP 连接，官网列出的服务包括 Gmail、Calendar、Notion、Slack 和 GitHub。连接后，服务工具会加入助手的工具列表；发送、删除或修改数据的工具默认关闭，需要你自行启用。支持 MCP 客户端连接，并不等于官网提供了面向开发者的独立 sideOS API。

如何完成第一次实际操作

可以先选择“总结当前网页并保存到备忘录”这样容易核对的任务，按以下路径开始：

1. 确认电脑是 Apple Silicon Mac，系统为 macOS 14 或更新版本；下载应用并完成引导及许可证激活。
2. 在设置的权限页检查辅助功能、麦克风和语音识别权限。若快捷键无反应，先查看这里，而不是反复重试。
3. 在 AI 设置中选择模型。使用云模型时填入自己的 API Key，并确认供应商账户有可用额度；使用本地模型时先准备适合机器内存的模型。
4. 打开需要处理的网页，按住 Control + Option，说明需要提炼哪些信息、保存在哪里，再松开按键。若只想针对某张图提问，可框选相关区域。
5. 打开生成的笔记核对内容、来源含义和保存位置。发生误操作或任务方向不对时，按 Esc 停止；涉及发送、删除或付款的内容，执行前要自行复核。

不方便说话时，双击 Control 可打开文字聊天入口。长任务可以交给后台任务，但“助手说已完成”不应代替对实际文件或应用状态的检查。

Mac 语音输入：不用模型 API 的本地听写

按住 Control + fn 说话，内容会写入当前光标处；也支持免按住的听写方式。没有聚焦到可编辑文本框时，文字会留在剪贴板，方便之后粘贴。这里的输出是文字，并不自动等同于调用智能体执行整套操作。

默认听写使用 macOS 自带的设备端语音引擎，不需要单独的模型 API Key，也不按字数额外计费。官网区分两种引擎：经典引擎列出 62 种语言，单次约一分钟；macOS 26 的 SpeechAnalyzer 列出 30 种语言，单次没有同样的时长限制。实际可用语言和引擎取决于系统及所选语言，不能把“支持多语言”理解为所有语言都享有相同能力。

让会议、研究和提醒衔接起来

会议后续处理：检测到 Zoom、Google Meet 或 Teams 通话窗口时，应用会提示录制，不会自行开始。Whisper 转写在本机进行，之后可生成摘要和待办，并将行动项转为提醒。会议摘要可复制为 Markdown，或连同转写导出为 Markdown、HTML。录制前应确认参与者已知情并遵守适用规则；若摘要使用云模型，相关文本的数据路径仍以模型设置为准。

后台资料整理：需要搜索网页、处理文件并生成报告时，可交给后台任务。它有独立的文件、搜索、命令和 PDF 渲染工具，产物集中在 Documents 下的 sideOS Tasks 文件夹。会产生不可逆影响的命令有审批机制，任务结束或需要介入时会通知你。下载报告后，应核对其中的来源和结论。

持续工作上下文：提醒可以一次性或重复执行，也能在提醒到来前准备任务结果。记忆保存在本地，可以查看、修改、删除或关闭；活动历史则默认关闭，可自行设定保留时间和排除应用，密码管理器始终排除。适合确实需要回查工作上下文的用户，开启前应先考虑要记录哪些内容。

买断价格、模型费用与离线授权

截至 2026 年 10 月 25 日，官网公开标价及结构化数据为 89.90 美元一次性购买，同一时间覆盖一台 Mac，可迁移到新电脑，并包含未来应用更新。最终价格、税费和结算条件以官方定价及结账页为准。

软件授权和模型计算是两笔费用。选择 Anthropic、OpenAI、Google 或 xAI 等云模型时，需要自己的 API Key，由供应商另行收取调用费用；选择本地 MLX 模型时，不产生云模型 API 调用费，但运行能力受电脑内存及模型支持情况影响。听写没有额外的逐字计费，并不表示整款应用永久免费；引导中的体验步骤也不能当成长期免费套餐。

许可证条款还说明，激活及定期续验需要连接授权服务器，续验后的许可证最多可离线使用 30 天。因此，“本地模型可离线推理”和“软件永远无需联网验证”是两回事。

隐私：哪些留在电脑，哪些会发出去？

录音、转写、记忆和历史默认保存在本机，API Key 放在 macOS 钥匙串中。使用云模型执行请求时，任务所需的指令、屏幕文本，以及必要的图像，会从 Mac 直接发送给你选择的模型供应商，并适用该供应商的政策；MCP 连接也会与相应服务交换数据。

默认本地语音识别与主动开启的云语音模式需要区分。语音聊天、可选云听写或云朗读开启后，相关音频或回复文字可能发往服务商。应用还有可关闭的每日使用统计，授权激活会发送许可证与设备相关信息。通过应用提交故障报告时，日志可能包含本次会话的指令和听写文本，应先查看日志再发送。完整范围见官方隐私政策。

常见问题

sideOS 是免费软件吗？买断后还要付模型费用吗？

它采用付费买断授权。设备端听写不额外按字数收费，但云模型调用由你选择的供应商另计；本地模型可避免这部分云端费用。

不用 API Key 或者断网时，sideOS 还能工作吗？

本地听写不需要模型 API Key，本地模型也可在准备好后离线运行。不过联网搜索、外部服务连接需要网络，许可证续验后的离线期限最多为 30 天。

屏幕、语音和会议资料会不会上传？

取决于使用模式。本地保存和本地转写不代表云模型不接收上下文；云端推理会发送任务需要的内容，可选云语音及 MCP 服务也有各自的数据传输。

Intel Mac、Windows 能用吗？要开什么权限？

当前官方要求 Apple Silicon Mac 和 macOS 14 及以上，不支持 Intel Mac，未提供 Windows 版本。主要权限为辅助功能、麦克风和语音识别，具体功能还受引擎、模型及连接服务影响。

官方资源与使用帮助

• 官方支持：查看安装、权限、模型连接及许可证问题的处理路径。
• 版本更新记录：核对最新本地模型支持、导出能力和功能修复。