Windows Copilot Runtime översikt

Windows Copilot Runtime tillhandahåller en mängd olika AI-baserade funktioner som är tillgängliga via APIs, så att du kan använda AI-funktioner utan att behöva hitta, köra eller optimera din egen Maskininlärningsmodell (ML). Modellerna som driver Windows Copilot Runtime på Copilot+-datorer körs lokalt och kontinuerligt i bakgrunden.

När du använder AI-funktioner rekommenderar vi att du granskar: Utveckla ansvarsfulla generativa AI-program och funktioner i Windows.

Windows Copilot Runtime funktioner och APIs för Windows-appar

Windows Copilot Runtime innehåller följande funktioner och AI-stödda APIs (i Windows App SDK) som drivs av modeller som körs lokalt på Windows-enheten.

• Phi Silica: Phi Silica-APIs levereras i Windows App SDK. På samma sätt som OpenAI:s GPT Large Language Model (LLM) som driver ChatGPT är Phi en SLM (Small Language Model) som utvecklats av Microsoft Research för att utföra språkbearbetningsuppgifter på en lokal enhet. Phi Silica är särskilt utformat för Windows-enheter med en neural bearbetningsenhet (NPU), vilket gör att textgenererings- och konversationsfunktioner kan köras på ett högpresterande maskinvaruaccelererat sätt direkt på enheten.

• Text Recognition med OCR: Text RecognitionAPIs (kallas även optisk teckenigenkänning eller OCR) levereras i Windows App SDK. Dessa APIs möjliggöra igenkänning av text i en bild och konvertering av olika typer av dokument (till exempel skannade pappersdokument, PDF-filer eller bilder som tagits av en digital kamera) till redigerbara och sökbara data på en lokal enhet.

• Bildbehandling APIs: Den AI-förbättrade bildbehandlings-APIs levereras i Windows App SDK. Dessa APIs utför en mängd olika operationer, till exempel intelligent skalning av bilder och identifiering av objekt i bilder.

• Studio Effects: Windows-enheter med kompatibla neurala bearbetningsenheter (NPUs) integrerar Studio Effects i de inbyggda inställningarna för enhetskamera och mikrofon. Använd specialeffekter som använder AI, inklusive: Bakgrundsoskärpa, Ögonkontaktskorrigering, Automatisk inramning, Porträttljuskorrigering, Kreativa filter eller Röstfokus för filtrering av bakgrundsbrus.

• Recall: Recall gör det möjligt för användare att snabbt hitta saker från sin tidigare aktivitet, till exempel dokument, bilder, webbplatser med mera. Utvecklare kan utöka användarens Recall-upplevelse med deras app genom att lägga till kontextuell information i den underliggande vektordatabasen med User Activity API:et . Den här integreringen hjälper användarna att fortsätta där de slutade i din app, vilket förbättrar appengagemanget och användarens sömlösa flöde mellan Windows och din app.

• Översättningar av livetexter hjälpa alla i Windows, inklusive de som är döva eller hörselskadade, bättre förstå ljud genom att visa bildtexter av talat innehåll (även när ljudinnehållet är på ett annat språk än systemets föredragna språk).

• Innehållsmoderering: Lär dig hur Windows Copilot Runtime modererar innehåll och hur du justerar känslighetsfilter.

Integrera AI i företagsappar med hjälp av Windows Copilot RuntimeAPIs

Titta på demosessionen Integrera AI i Enterprise-appar med Windows Copilot RuntimeAPIs från Ignite-konferensen i november 2024.

Ytterligare resurser

• Kom igång med AI i Windows: Windows Copilot Runtime implementerar ett API för textinnehållsmoderering för att flagga och filtrera bort potentiellt skadligt innehåll. Läs mer om den här funktionen och hur du justerar filterkänsligheten.
• Utveckla ansvarsfulla generativa AI-program och funktioner i Windows: Vägledning för att på ett ansvarsfullt sätt utveckla appar som innehåller AI.
• AI i Windows Sample Gallery: En samling exempel som visar en mängd olika sätt att förbättra dina Windows-appar med ai.