
AppleはApple IntelligenceをAIと称して昨年OSの中にLLMモデルを組み込み、SIRIとの連動ほか挑戦的な試みを続けています。でも、日本で使うには恥ずかしくなるくらいの内容です。はっきりいって使い物にならないというべきところ。本日現在の状況を具体例で示しましょう。
・・・・・
今年になってAIを取り巻く環境の急激な変化に気付き関連ニュースを追っていますが、毎日のように飛び込んでくる大量の情報にアタフタ。その中で、3月にローカルLLMについて調べているとmacOSには既に昨年8月時点でLLMモデルが組み込まれていることを知りました。
Appleによると、macOS Tahoeには3B LLMモデルを組み込んでいます。Apple Foundation Modelsという名称で、基本的に翻訳、要約などを主たる目的としているらしい。
だったら、それを使えばわざわざ他社製のをインストールする必要ないじゃないかと思いましたが、インタフェースがもう1つなのでそのままにしていたら、今年のWWDC (Appleのデヴェロッパー会議)でそのApple Intelligenceが取り上げられていたのでちょっとチェックしてみました。結果、私には全く使う気を起こさせないくらいにひどい内容でした。
以下、実例を示します。下記はこちらのMacにApple intelligenceとのインタフェースを行うApfelをインストールして得たもの。出力はターミナルです。
last login: Thu Jun 11 09:54:39 on ttys000
arita ~ % apfel “What is the prefectual government location of SHIGA, Japan?”The prefectural government of Shiga, Japan, is located in the city of Nagahama.
arita* ~ % apfel “where is the location of SHIGA, Japan?”
Shiga is a prefecture located in the Kansai region of Japan. It is situated in the southern part of the island of Honshu. Shiga is bordered by the prefectures of Niigata to the north, Kyoto to the northeast, Osaka to the east, and Wakayama to the southeast. The prefecture is known for its historic sites, including the famous UNESCO World Heritage Site of the ancient capital of Nara, and its natural attractions, such as the Kuju Mountains and Lake Biwa.
滋賀県の県庁所在地は?と聞くと長浜と答え(正解は大津)、滋賀県の位置は?と問うと、「北は新潟、北東は京都、東は大阪、南東は和歌山」で地理を知っている者には???。
念のために日本語のインタフェースでチェックすると、今度は「滋賀県の県庁所在地は彦根市」なんて答えてきました(あらら)。おまけに日本は「世界第六位の面積を持つ国」だそうです。もうメチャクチャですわ、これ。深層学習のレヴェルが地理地勢に及んでいないのは事前学習レベルが低すぎる証拠です。

こんな例示でAppleを批判するなという向きもあるでしょうが、逆に地理や地勢が出鱈目なAIに大切な判断を任せるという方が私にはアンビーリバブル。
LLMの本質は言語を細切れにして(トークン化)、その出現確率を多層ニューロネットワークで計算して後に続く言葉を作り出すというものですから、知識ベースの問題に弱いのはその通り。だからこそ、Claude君は知識ベースに任せるものは任せるという方法を採用していますが、Appleの方法はそこまで辿り着いていない、それを知っているからこそChat-GPTへの繋ぎを用意しているのでしょうが本体がこれではアウト。
3年前にチャッピー(Chat-GPT)をお笑いだと云いましたが、チャッピーもClaude君もこの数年著しい進化を遂げかなり使いやすくなってきました。にもかかわらず、AppleのFoundation modelsってこの程度なのかと唖然とする次第。
なんとかしてね>Apple。