Windows Copilot Runtime 概述
重要
不支持自包含应用。
Windows Copilot Runtime 提供了各种通过 APIs提供的 AI 功能,使你无需查找、运行或优化自己的机器学习(ML)模型即可利用 AI 功能。 为 Copilot+ PC 供电 Windows Copilot Runtime 的模型在本地和后台持续运行。
使用 AI 功能时,建议查看:在 Windows上开发负责任的生成 AI 应用程序和功能。
适用于 Windows 应用的 Windows Copilot Runtime 功能和 APIs 功能
Windows Copilot Runtime 包括由在 Windows 设备上本地运行的模型提供支持的以下功能和 AI 支持的 APIs(Windows 应用 SDK)。
Phi 硅:Phi 硅 APIs 将在 Windows 应用 SDK中交付。 与为 ChatGPT 提供支持的 OpenAI 的 GPT 大语言模型 (LLM) 类似,Phi 是由 Microsoft Research 开发的小型语言模型 (SLM),用于在本地设备上执行语言处理任务。 Phi Silica 专为具有神经处理单元 (NPU) 的 Windows 设备设计,允许文本生成和聊天功能直接在设备上以高性能、硬件加速的方式运行。
Text Recognition 带有 OCR:Text RecognitionAPIs(也称为光学字符识别 (OCR))将在 Windows 应用 SDK 中发布。 这些 APIs 允许识别图像中的文本,以及将不同类型的文档(如扫描的纸质文档、PDF 文件或数字相机捕获的图像)转换为本地设备上的可编辑和可搜索的数据。
成像 APIs:AI 增强的成像 APIs 将在 Windows 应用 SDK 中发布。 这些 APIs 执行各种操作,例如智能缩放图像和识别图像中的对象。
Studio Effects:具有兼容神经处理单元(NPU)的 Windows 设备将 Studio Effects 集成到内置设备相机和麦克风设置中。 应用利用 AI 的特殊效果,包括:背景模糊、眼神交流校正、自动取景、人像光效校正、创意滤镜或语音聚焦,以筛选出背景噪音。
Recall:Recall 使用户能够快速查找过去活动的内容,例如文档、图像、网站等。 开发人员可以通过Recall 将上下文信息添加到基础矢量数据库来丰富用户的 体验。 此集成将帮助用户在应用中继续上次中断的位置,从而改善与应用的互动以及用户在 Windows 和应用之间的无缝流。
实时字幕翻译在 Windows 上帮助每一个人(包括耳聋者或耳背者)通过观看口语内容的辅助字幕来更好地了解音频(即使音频内容的语言与系统的首选语言不同)。
内容审查:了解如何 Windows Copilot Runtime 审查内容以及如何调整敏感度筛选器。
使用 Windows Copilot RuntimeAPIs 在企业应用中集成 AI
观看来自 2024 年 11 月 Ignite 大会的演示会议使用 Windows Copilot RuntimeAPIs 在企业应用中集成 AI。
其他资源
- 开始在 Windows 上使用 AI:Windows Copilot Runtime实现文本内容审核 API 来标记和筛选潜在的有害内容。 了解有关此功能以及如何调整筛选器灵敏度的更多信息。
- 在 Windows上开发生成性 AI 应用程序和功能:关于负责任地开发包含 AI 的应用的指导。
- Windows 示例库中的 AI:一组示例,演示了使用 AI 增强 Windows 应用的各种方法。