MicrosoftはWindowsをAI搭載のオペレーティングシステムにしたいと考えており、Copilot+ PCを発売する

Windows 11 に今後導入されるリコール機能では、ユーザーが数週間前、場合によっては数か月前にコンピューター上でどのアプリやコンテンツにアクセスしたかを「記憶」することができ、たとえば、購入を考えている服について話し合っている Discord チャットを見つけるのに役立ちます。 ユーザーは Recall のタイムラインを使用して「スクロールバック」して最近取り組んでいることを確認したり、PowerPoint プレゼンテーションなどのファイルを詳しく調べて検索に関連する可能性のある情報を表示したりできます。

Microsoftによれば、Recallは色や画像などの間の関連付けを作成できるため、ユーザーはコンピュータ上のほぼすべてのものを自然言語で検索できるようになる（新興企業Rewindの技術と同様）。 開発者は、アプリケーションにコンテキスト情報を追加することで、再現率を向上させることができます。 Microsoft は、Recall に関連付けられたすべてのユーザー データは非公開のままでデバイス上に存在し、重要な AI モデルのトレーニングには使用されないと主張しています。

ここ もっと Microsoft より: 「スナップショットはあなたのものであり、コンピュータ上にローカルに保存されます。タスクバーのシステム トレイのアイコンから、いつでも個別のスナップショットを削除したり、時間範囲を調整したり、一時停止したりできます。アプリやウェブサイトをフィルターして、保存されないようにします。

画像編集とライブ翻訳

Windows にはこれまで以上に多くの AI が搭載されており、その一部は新しい Copilot+ PC 専用です。

スーパーソリューションと呼ばれる新機能は、古い写真を自動的にアップスケールして復元できます。 Copilot は画像を分析して、クリエイティブな構図のアイデアをユーザーに提供できるようになりました。 Cocreator と呼ばれる機能を通じて、ユーザーは画像を作成するだけでなく、AI モデルを自分の描いたものに従って、画像を変更または再設計することもできます。

また、字幕付きライブ キャプションは、YouTube やローカル ファイルなど、コンピューターを通過する音声をユーザーが選択した言語に翻訳します。 ライブ翻訳は当初、英語、スペイン語、北京語、ロシア語など約 40 の言語をサポートします。

Microsoft Edge の別個の関連する新機能は、LinkedIn、YouTube、Coursera、Reuters、CNBC、Bloomberg などのサイトでリアルタイムのビデオ翻訳を提供します。 近い将来利用可能になる予定のこの機能は、スペイン語から英語、英語からドイツ語、ヒンディー語、イタリア語、ロシア語、スペイン語の翻訳をサポートし、吹き替えやライブ字幕を通じて音声コンテンツを翻訳します。

副操縦士と付属品

Team Copilot は、成長を続ける Microsoft の生成 AI テクノロジの Copilot ポートフォリオの最新の拡張版です。 同社のビデオ会議アプリである Teams と統合されているため、会議の議題を管理したり、会議の参加者全員が共同作成できるメモを作成したりすることができます。 これは、Microsoft のコラボレーションおよび計画プラットフォームである Loop および Planner に拡張され、タスクの作成と割り当て、期限の追跡、入力が必要なときにチーム メンバーに通知することができます。

これと多少関連する Copilot のニュースとして、Microsoft は、開発者が GitHub 独自のコード生成ツール GitHub Copilot をサードパーティのアプリやスキルで拡張できるようにする Copilot Extensions を (プライベート プレビューで) 開始しました。 起動パートナーには、DataStax、Docker、LambdaTest が含まれます。 拡張機能は GitHub Marketplace に常駐しますが、開発者は独自の拡張機能を作成して内部システムや API と統合することもできます。

Windows のコパイロット ランタイム

Recall や Supersolution などの機能をオフにするのは、Microsoft が Windows の「新しい層」と呼ぶものを構成する約 40 個の生成 AI モデルのコレクションである Windows Copilot ランタイムです。 Windows Copilot ランタイムを、個々の Copilot+ PC にネイティブなベクトル ベースのシステムである Semantic Index と組み合わせることで、サードパーティ アプリケーションを含む AI 搭載アプリケーションを、必ずしもインターネット接続を必要とせずに実行できるようになります。

」[The runtime] スタジオエフェクト、ライブキャプション、OCR、ユーザーアクティビティによるリコール、および [more]Davuluri氏は火曜日、このアプリは6月に開発者に提供される予定だと述べた。

Microsoftによると、TikTokオーナーByteDanceの人気ビデオエディタであるCapCutは、Windows Copilot Runtimeと、それに付随するAPIとAI開発ツールのセットである新しいWindows Copilotライブラリを使用して、AI機能を高速化するという。 Meta は上記の Studio Effects を WhatsApp に追加し、ビデオ通話中の背景ぼかしやアイコンタクトなどの機能を提供します。

ロボットビルダーをアップグレードする

Microsoft の Azure OpenAI サービス内のツール スイートである Azure AI Studio を使用すると、顧客は AI モデルを組み合わせて、そのデータについて「考える」アプリを作成できます。まもなく、開発者は従量課金制の推論 API を使用してアプリを構築できるようになります。開発者が Azure インフラストラクチャでホストされている生成 AI モデルにアクセスして微調整できる API。 Microsoftはこれを「as-a-serviceモデル」と呼んでおり、まずはNixtlaとCore42のモデルからスタートする。

隣接する Copilot Studio 製品スイートで、Microsoft は Copilot Agent を発売しています。同社はこれを、「特定の役割と機能に合わせたタスクを自律的に調整する」ことができる AI ボットと説明しています。 (Copilot Studio は、Excel や Word などのアプリケーションの AI を活用した「コパイロット」である Copilot for Microsoft 365 とサードパーティ データを接続するためのツールを提供します。) メモリとコンテキストの知識を活用することで、Copilot エージェントはさまざまなタイプのビジネス ワークフローをナビゲートできます。ユーザーのコメントから学び、対処方法がわからない状況に遭遇したときに助けを求めます。

Snapdragon 開発キット

Arm チップを搭載した Copilot+ PC 用のアプリを作成する開発者を対象とした、クアルコムの新しい開発キットがあります

899.99 ドルの Windows 用 Snapdragon 開発キット (幅、高さ、長さは Apple の Mac Mini とほぼ同じ) には、Qualcomm の Snapdragon と多くの I/O 操作が組み込まれています。 この開発キットは Wi-Fi 7 と Bluetooth 5.4 をサポートしており、さまざまな USB-C ポートと HDMI ポートを通じて最大 3 台の 4K ディスプレイに同時に電力を供給できます。

PHI-3

Microsoft は、Phi 生成 AI モデル ファミリへの追加、Phi-3-vision を発表しました。これは、グラフや画像に関する質問に答えるなど、一般的な視覚分析と推論タスクを実行できます。 このモデルはテキストと画像の両方を読み取ることができ、モバイル デバイス上で実行するのに十分な効率性を備えています。

Phi-3-vision はプレビューで利用可能ですが、以前に発表されたテキストのみのモデルである Phi-3-mini、Phi-3-small、および Phi-3-medium は現在一般提供されています。

カーンアカデミーとのパートナーシップ

マイクロソフトはカーン アカデミーと提携してクラウド コンピューティング インフラストラクチャへのアクセスを寄付し、カーン アカデミーが米国の教育者にカーン アカデミーの AI を活用したツールへの無料アクセスを提供できるようにします。 Microsoftは火曜日、両社は生成AIを通じて数学教育用のAIアプリケーションを改善する機会を模索するために協力すると発表した。

AI を活用したニュースレターを発行します。 サブスクリプション ここ 6 月 5 日に受信箱で受信を開始するには。