クレッシーがAofei Temple、QbitAIからレポート | WeChat公式アカウントQbitAI

ChatGPT クライアントは「スクリーン リーダー プログラミング」をサポートするようになりました。

本日より、 Mac Plus ユーザーはChatGPT クライアントが開発ツールからコードを直接読み取ることができるようになります。

現在、この機能は、一般的に使用されているXcode や VS Codeを含む 5 つのプログラミング ツールをサポートしています。

ネットユーザーのマッケイ・リグレーさんは、まるで夢のようで、今後どのように展開していくのか楽しみで仕方がないと語った。

一部のネットユーザーは、OpenAI の宣伝用の例は単純すぎる、実際の機能はデモで示されているよりもはるかに強力だ、とも述べている。

Mac版のアップデートに合わせて、 Windowsユーザーが待ち望んでいたデスクトップクライアントもついに本格始動しました。

Mac Plus ユーザーは「画面からプログラミング」できるようになりました。

本日より、ChatGPT Mac クライアントで「スクリーン リーダー プログラミング」が実行できるようになりました。

OpenAI の公式プロモーション ビデオでは、デモンストレーターがサンプル アプリにタブを追加するように要求しました。

ご覧のとおり、ChatGPT は既存のコードをセッションに自動的にインポートし、必要に応じて新しい完全なコードを生成します。

実際、これはプログラミングツールを初めてカバーした ChatGPT クライアントの Mac 版で開始された OpenAI の「Work with Apps」機能の結果です。

具体的には、この機能は現在、Xcode、VS Code、TextEdit (VS Code にはプラグインが必要) の 3 つの IDE またはエディターと、Terminal と iTerm の 2 つのターミナル ツールをサポートしています。

使用を開始する前に、システム設定で ChatGPT クライアントの「アクセシビリティ」権限を有効にする必要があります。

3 つのエディターのうち、ChatGPT は、ウィンドウの長さの制限を超えるまで、フォアグラウンド ウィンドウに含まれるコード全体を処理します。

エディターでコンテンツの一部を選択すると、ChatGPT はウィンドウ全体を処理しながら、選択した部分に焦点を当てます。

2 つのターミナル ツールの場合、ChatGPT はウィンドウの最後の 200 行を処理します。

この機能は現在、Plus および Team 加入者のみが利用できますが、今後数週間以内に Enterprise および Edu ユーザーにも展開される予定です。

「Work with Apps」という名前が示すように、この機能はプログラミング ツールだけでなく、将来的にはさらに多くのアプリケーションをサポートする可能性があります。

OpenAI が来年 AI エージェントをリリースする予定であるという報道を考慮すると、「Work with Apps」は OpenAI にとってこの方向への最初の試みとなるかもしれない。

ただし、「Work with Apps」機能は、画面の内容を視覚的に読み取るのではなく、Apple の「アクセシビリティ」API を呼び出すことによって実装されているようです。

さらに、既存のコードから生成された新しいコンテンツをプログラミング ツールに直接インポートすることはできず、手動でコピーして貼り付ける必要があります。

そのため、ChatGPT のユーザー エクスペリエンスはいくつかの批判を受けています。

対照的に、OpenAIの競合他社であるAnthropicとGoogleは、すでにビジョンベースの画面操作機能を備えています。

うまくいけば、OpenAI のエージェントが正式にリリースされる頃には、ユーザー エクスペリエンスも向上しているでしょう。

Windowsクライアントが完全に起動しました

OpenAIはMac版の機能アップデートに加えて、Windowsユーザーにも朗報をもたらしました。

Windows クライアントが完全に利用可能になり、無料ユーザーも使用できるようになりました。

完全にリリースされたクライアントはすでに高度な音声モードをサポートしており、新しく導入された検索機能も含まれています。

Mac の Option + Space と同様に、Windows のどのインターフェースからでもAlt + Spaceを押すことで ChatGPT にアクセスできます。

ポップアップ ウィンドウでは、テキストを入力したり、スクリーンショットをアップロードしたり、カメラで写真を撮ったり、ローカル ファイルをアップロードしたりできます。

Microsoft Store インターフェースでは Windows クライアントが 9 月 7 日にリリースされたことが示されていますが、OpenAI の公式 Web サイトによると、ベータ バージョンは 10 月に Plus、Team、Enterprise、Edu などの有料ユーザーに提供されました。

いずれにせよ、本日から有料ユーザーと無料ユーザーの両方が Windows クライアントを体験できるようになります。

さらに、OpenAI の公式 Twitter 発表のコメント セクションでは、多くのネットユーザーが Windows 10 がサポートされているかどうかを尋ねました。

この問題に関しては、Microsoft ストアではサポートされていると示されていますが、サブバージョン番号が 17763.0 (2018 年 10 月の更新プログラムまたはバージョン 1809 とも呼ばれます) 以上である必要があります。

参考リンク: [1] https://techcrunch.com/2024/1... [2] https://help.openai.com/en/ar... [3] https://help.openai.com/en/ar...