Windows Copilot Runtime 概述

重要

不支持自包含应用。

Windows Copilot Runtime 提供了各种通过 APIs提供的 AI 功能,使你无需查找、运行或优化自己的机器学习(ML)模型即可利用 AI 功能。 为 Copilot+ PC 供电 Windows Copilot Runtime 的模型在本地和后台持续运行。

使用 AI 功能时,建议查看:在 Windows上开发负责任的生成 AI 应用程序和功能。

适用于 Windows 应用的 Windows Copilot Runtime 功能和 APIs 功能

Windows Copilot Runtime 包括由在 Windows 设备上本地运行的模型提供支持的以下功能和 AI 支持的 APIs(Windows 应用 SDK)。

  • Phi 硅:Phi 硅 APIs 将在 Windows 应用 SDK中交付。 与为 ChatGPT 提供支持的 OpenAI 的 GPT 大语言模型 (LLM) 类似,Phi 是由 Microsoft Research 开发的小型语言模型 (SLM),用于在本地设备上执行语言处理任务。 Phi Silica 专为具有神经处理单元 (NPU) 的 Windows 设备设计,允许文本生成和聊天功能直接在设备上以高性能、硬件加速的方式运行。

  • Text Recognition 带有 OCR:Text RecognitionAPIs(也称为光学字符识别 (OCR))将在 Windows 应用 SDK 中发布。 这些 APIs 允许识别图像中的文本,以及将不同类型的文档(如扫描的纸质文档、PDF 文件或数字相机捕获的图像)转换为本地设备上的可编辑和可搜索的数据。

  • 成像 APIs:AI 增强的成像 APIs 将在 Windows 应用 SDK 中发布。 这些 APIs 执行各种操作,例如智能缩放图像和识别图像中的对象。

  • Studio Effects:具有兼容神经处理单元(NPU)的 Windows 设备将 Studio Effects 集成到内置设备相机和麦克风设置中。 应用利用 AI 的特殊效果,包括:背景模糊、眼神交流校正、自动取景、人像光效校正、创意滤镜或语音聚焦,以筛选出背景噪音。

  • Recall:Recall 使用户能够快速查找过去活动的内容,例如文档、图像、网站等。 开发人员可以通过Recall 将上下文信息添加到基础矢量数据库来丰富用户的 体验。 此集成将帮助用户在应用中继续上次中断的位置,从而改善与应用的互动以及用户在 Windows 和应用之间的无缝流。

  • 实时字幕翻译在 Windows 上帮助每一个人(包括耳聋者或耳背者)通过观看口语内容的辅助字幕来更好地了解音频(即使音频内容的语言与系统的首选语言不同)。

  • 内容审查:了解如何 Windows Copilot Runtime 审查内容以及如何调整敏感度筛选器。

使用 Windows Copilot RuntimeAPIs 在企业应用中集成 AI

观看来自 2024 年 11 月 Ignite 大会的演示会议使用 Windows Copilot RuntimeAPIs 在企业应用中集成 AI

其他资源

  • 开始在 Windows 上使用 AI:Windows Copilot Runtime实现文本内容审核 API 来标记和筛选潜在的有害内容。 了解有关此功能以及如何调整筛选器灵敏度的更多信息。
  • 在 Windows上开发生成性 AI 应用程序和功能:关于负责任地开发包含 AI 的应用的指导。
  • Windows 示例库中的 AI:一组示例,演示了使用 AI 增强 Windows 应用的各种方法。