macOS Montereyの最もクールな新機能の一つ、Live Text。Appleの説明によると、「デバイス上の機械学習を用いて、写真内の電話番号、ウェブサイト、住所、追跡番号などのテキストを検出します。これにより、ユーザーはコピー＆ペースト、電話をかける、ウェブサイトを開く、そして簡単に詳細情報を見つけることができるようになります。」
強化版OCR（光学文字認識）のようなものだと考えてください。あるいは、Mxプロセッサ搭載Macの機能とも考えてみてください。実際、その通りです。IntelベースのMacをお使いの方には申し訳ありません。
同様の機能を持つのがVisual Lookupです。こちらも機械学習を活用し、写真に写っている動物、芸術作品、ランドマーク、植物などについてユーザーが発見し、学習できるよう支援します。これらの機能は、写真、メッセージ、Safariなどのアプリを含むmacOS全体で利用できます。
まず、Live Textを見てみましょう
この機能はSafari、写真、スクリーンショット、クイックルックで動作します（この記事を執筆以降、さらに多くのアプリで対応しているかもしれません）。これらのアプリでテキストを含む画像を表示している場合は、テキストの上にカーソルを移動してください。テキスト選択ツールが表示されます。
これで、テキストを選択してコピーし、ドキュメントに貼り付けることができます。また、画像内のテキストを「掴んで」、別のアプリにドラッグ＆ドロップすることもできます。
ダブルクリックで単語を選択、トリプルクリックで文全体を選択することもできます。または、カーソルをテキストの段落全体にドラッグして選択することもできます。
テキストを選択したら、右クリックまたはControlキーを押しながらクリックするとコンテキストメニューが表示されます。このメニューから、「検索」「翻訳」「Googleで検索」「コピー」「検索」などのオプションにアクセスできます。
Live Textは、電話番号、住所、ウェブリンク、書式設定されたテキストなどのテキストを「認識」して区別し、テキストにアクションを適用できます。例えば、Live Textでは次のようなことができます。
° ウェブサイトのリンクをタップして Safari を起動します。
° 住所をクリックして連絡先に追加します。またはマップで開きます。
° 電話番号をクリックすると FaceTime 通話が開始されます。
° クイックノートに追加します。
電話番号機能について興味深い話があります。Live Textには「拡大表示」オプションがあり、電話番号を大きなオーバーレイで表示します。これは、視覚に問題のある人がmacOSのアクセシビリティ設定にアクセスする際に役立ちます。（私のように老眼の人にも役立ちます。）
Live Text の使い方の一例を見てみましょう。私のお気に入りの使い方は Safari です。
ウェブブラウザでテキストを含む写真や画像を表示しているときに、マウスポインタをテキストの上に置いてください。テキストを選択するとコピーされます。これは新しい機能のため、すべてのウェブページでコピーできるとは限りません。
また、他のオプションの中でも、上の画像に示すように、テキストを共有したり、Mac に読み上げさせたりすることもできます。
