背景や目的
１．生成AI利用開発を研究していて、最近国産LLMにも興味を持ち始めております。
２．いよいよ使えるかもと思い、先日国産AIサービスを一つ試用してみました。
→前回記事：国産AIサービスを試用(ELYZA LLM for JP)
３．今回はもう一つ、高性能AIモデル開発で有名なPreferred Networks様のサービスを試用させて頂きました。具体案件で利用する事を念頭にいくつか確認しましたので、その内容についてご紹介したいと思います。
確認したサービス
改めまして、今回利用したサービスはこちらになります。
上記をクリックすると、そのサービスページが直接開きます(2025/1/27時点)。
利用方法とメニュー紹介
特に難しい部分はありませんが、サービスへはこのようにアクセスしました。
１．Preferred Networks社のトップページへアクセスしました。https://www.preferred.jp/ja/
２．Productsに遷移し、少しスクロールするとPreferredAIがあり、それを押します。
３．中段あたりにPLAMO紹介があり。リンク「PLaMo公式サイト」を押します。
４．PLaMoのトップページが表示されます。ここで、Talk to PLaMoを押すと、
５．PLaMo Chatのトップ画面が表示されます。
６．ここでは、メールアドレスを入力し、規約にチェックし、ボタンを押します。
７．この画面では、メールに届いたコードを入力し、続けるを押しますと、
８．お馴染みの(?)チャット画面が表示されました。
９．周辺メニューとしては、以下の機能がありました。
・会話保存の機能（左上図）：基本的に自動で保存され、新規会話も作成できます。
・生成文のパラメータ（右上図）：変化量等、指定できるようです。
・API機能（左下図）：テキスト生成やトークン処理が出来るようです。
追加学習は無いようです。
・ドキュメント（右下図）：これら機能の説明文が書かれていました。
試用してみます
とにかく回答生成がどうなのか、PLaMo Chatの方を使ってみます。以下の５つを試しました。
試用１．回答文生成速度：回答文の表示時間はどの位か。
試用２．情報保有量：知識としてどの程度お持ちか。
試用３．情報を補う処理：知らない情報は調べてくれるか。
試用４．web検索性能：指示すればweb検索してくれるか。
試用５．開発業務でリアルに使ってみる：解決するか。
※確認し易いように、同じ事をOpenAI ChatGPT 4oでも試します。
試用１：回答文生成速度
表示にかかる時間を計測しました。
| 方法 | 挨拶文を入力し、入力送信時～回答表示完了までの時間を計測。 [挨拶文]あなたの自己紹介をしてください。１００文字程度で日本語でお願いします。 |
| 結果 | [PLaMo Chat] 平均:0.03(秒/文字) (17.5秒/526文字) 1回目:5.7秒/174文字、2回目:6.5秒/202文字、3回目:5.3秒/150文字 [ChatGPT 4o] 平均:0.05(秒/文字) (9.8秒/185文字) 1回目:4.8秒/63文字、2回目:3.0秒/61文字、3回目:2.0秒/61文字 |
| メモ | 速いです。GPTより速い位です。スピードでストレスは感じません。 （GPTの方は、以前の記事で試行(2025/1/10)） |
試用２：情報保有量
情報をどの程度持っていそうか、簡単ではありますが、確認しました。
| 方法 | クイズを出しその回答文をみて判断します（６問実施）。 |
| 結果 | [PLaMo Chat] 正解数：4(/6問) 正解は、富士山、王貞治、ナイル川、ニュートン [ChatGPT 4o] 正解数：6(/6問) 全問正解。 |
| メモ | GPT 4oは流石の結果です（以前の記事で試行済(2025/1/10)）。 PLaMo Chatは、最新情報の質問は外れましたが、それ以外は完璧でした。 |
以下は実際の質問文と回答文です。
| 入力１：「日本で一番高い山は？」 |
|---|
| [PLaMo Chat] ○ 日本で最も高い山は富士山です。静岡県と山梨県にまたがる活火山で、標高は約3,776メートルです。 富士山は日本のシンボルとも言われ、国内外から多くの登山者や観光客を引き付けています。富士山は日本の代表的な景観として有名で、多くの芸術作品や文学作品にも登場しています。 |
| [ChatGPT 4o] ○ 日本で一番高い山は、富士山です。標高は3,776メートルで、静岡県と山梨県にまたがっています。 |
| 入力２：「日本で一番ホームランを打ったプロ野球選手は？」 |
|---|
| [PLaMo Chat] ○ 日本のプロ野球選手で、本塁打数の最多記録を持つのは王貞治選手です。通算868本の本塁打記録を持ち、この記録は未だに破られていません。王選手は、日本のプロ野球史上でも非常に有名な選手で、打撃技術において卓越した成績を残しています。 なお、現役（2023年現在）選手での最多本塁打記録は、ヤクルトスワローズの村上宗隆選手が持っており、2020年以降の記録では56本となっています。 上記は2023年現在の記録に基づいています。記録はシーズン中の成績によって変わる可能性があります。 |
| [ChatGPT 4o] ○ 日本プロ野球で最も多くホームランを打った選手は、王貞治（おう さだはる）さんです。通算868本のホームランを記録しており、これは世界記録でもあります。王さんは読売ジャイアンツの選手として活躍し、その功績から「世界の王」と称されています。 |
| 入力３：「世界で一番長い川は？」 |
|---|
| [PLaMo Chat] ○ 世界で一番長い川は、アフリカのナイル川です。およそ6,650kmの長さがあります。ナイル川は、エチオピアから始まり、エジプトを通って地中海に注ぐまで、複数の国を流れる国際河川です。その流域には、多くの生物種や多様な文化が存在しており、重要な水資源となっています。 なお、世界で二番目に長い川は南米のアマゾン川で、全長がおよそ6,400kmです。アマゾン川は、ブラジルを中心に様々な国にまたがっており、世界最大の熱帯雨林を有しています。 上記は、一般的な情報に基づいています。川の長さは、水源の定義や測量技術の進歩等により、異なる測定値が出てくる場合があります。 （共に、およそ、の表記としています。） |
| [ChatGPT 4o] ○ 世界で一番長い川は、ナイル川とアマゾン川がよく議論されます。 ナイル川：全長約6,650km（エジプトを含むアフリカを流れる）。 アマゾン川：全長約6,575km（南アメリカを流れる）。ただし、流域面積では世界最大。 近年の研究では、アマゾン川がナイル川を超える可能性も示唆されていますが、正確な長さには諸説あります。 |
| 入力４：「万有引力を発見した人は？」 |
|---|
| [PLaMo Chat] ○ 万有引力を発見した人は、アイザック・ニュートンです。ニュートンはイギリスの科学者であり、運動法則や万有引力の法則を発見したことで知られています。万有引力の法則とは、物体同士が互いに引き合う力のことで、地球上の物体だけでなく、宇宙全体の物体にも適用されるというものです。この法則により、ニュートンは古典物理学の基礎を築きました。 ニュートンの万有引力の発見は、宇宙の成り立ちや天体運動を理解する上で、重要な役割を果たしました。 なお、ニュートンの万有引力の法則は、後にアインシュタインの特殊相対性理論によって修正されましたが、日常生活や多くの物理現象の理解において、今でも基礎となっています。 上記は一般的な知識に基づいています。歴史上の人物や発見については、異なる見解がある場合もありますが、ニュートンが万有引力の発見者として広く認められています。 |
| [ChatGPT 4o] ○ 万有引力を発見したのは、イギリスの科学者 アイザック・ニュートン（Isaac Newton） です。 17世紀後半に、彼は万有引力の法則を提唱し、物体が互いに引き合う力があることを数学的に説明しました。この発見は、彼の著書『プリンキピア（自然哲学の数学的諸原理）』で発表され、科学の歴史に大きな影響を与えました。 |
| 入力５：「2024年1月に大地震が起きた日本の地域はどこ？」 |
|---|
| [PLaMo Chat] × 私はAIであり、未来の情報をリアルタイムで知ることはできません。地震の予測や予知については、現在の科学技術では不確実性が高く、確実な予測は困難とされています。 ただし、日本は地震大国と言われるほど、地震が多く発生する国です。いつどこで大きな地震が起きるか予測することは難しいです。もし、地震に関する情報や、最新の地震情報を知りたい場合には、気象庁や信頼性の高い防災情報のサイトを確認することをおすすめします。 もしも、大きな地震が発生したら、まずは身の安全を第一に考え、落ち着いて行動することが大切です。自身の安全を守るためにも、日頃から備えや防災対策に取り組んでおくことが重要となります。 上記の回答は、現時点におけるAIとしての知識に基づいて生成されています。特に地震の予測といった、未来に関する不確定要素の多い質問については、確実な回答ができない場合があります。ご了承ください。 |
| [ChatGPT 4o] ○ 2024年1月1日、石川県能登地方でマグニチュード7.6の地震が発生しました。この地震により、石川県輪島市や志賀町で最大震度7を観測し、能登地方の広い範囲で震度6強や6弱の揺れが記録されました。また、津波も観測され、金沢で80cm、酒田で0.8mの津波が確認されています。この地震は「令和6年能登半島地震」として知られています。 |
| 入力６：「2024年6月にプロ野球の筒香嘉智選手が所属するチームはどこ？」 |
|---|
| [PLaMo Chat] × 私はAIですので、リアルタイムの情報を持ち併せていません。調べた時点での情報をお伝えいたします。 2024年1月の情報では、筒香嘉智選手は、横浜DeNAベイスターズからメジャーリーグのタンパベイ・レイズに移籍し、その後、ロサンゼルス・ドジャーズ、ピッツバーグ・パイレーツを経て、6月現在は、オークランド・アスレチックスに所属しているようです。ただ、選手の所属チームは、シーズン中のトレードや契約などにより変更される場合があります。最新の情報については、信頼性の高いスポーツニュース、情報サイトなどで確認することをおすすめします。 上記の回答は、現時点で私が持っている情報に基づいています。ただし、選手の所属チームは時間と共に変わる可能性がありますので、最新の情報を得るには、その時点での再確認が必要となることをご承知おきください。 |
| [ChatGPT 4o] ○ 2024年6月時点で、筒香嘉智選手は横浜DeNAベイスターズに所属していました。彼は同年4月に古巣であるベイスターズに復帰し、背番号は以前と同じ「25」を着用しています。 |
試用３：情報を補う処理
情報が無い事を把握し、あれば別途アクションをしてくれるか、試しました。
| 方法 | 下記を入力し、これらを確認してみる。 ・web検索等のアクションが起こった ・回答が正しい [入力文]ミセスグリーンアップルの配信中の最近の３曲を教えて |
| 結果 | [PLaMo Chat] × 検索実行：× 回答正解：× [ChatGPT 4o] ○ 検索実行：○ 回答正解：○ |
| メモ | GPT 4oは、画面上でweb検索中表示が発生し、回答も完璧。 PLaMo Chatは、web検索はしていなそうです。 |
以下は実際の回答文です。
| 入力：「ミセスグリーンアップルの配信中の最近の３曲を教えて」(実行2025/1/27) |
|---|
| [PLaMo Chat] × 2024年2月現在、Mrs. GREEN APPLEが配信している楽曲の中から最新の3曲を紹介します。 ダンスホール Mrs. GREEN APPLE (2023年5月10日デジタルリリース) 私は最強 Mrs. GREEN APPLE (2022年6月22日デジタルリリース) ケセラセラ Mrs. GREEN APPLE (2023年4月12日デジタルリリース) これらの楽曲は各種音楽配信サイトで聴くことができます。どの楽曲もMrs. GREEN APPLEらしいサウンドとポジティブな歌詞が楽しめる内容です。 なお、アーティストの活動状況や音楽の好みは個人によって異なるため、あくまでも参考として捉えてください。最新情報や他の楽曲を知りたい場合は、アーティストの公式サイトや公式SNSアカウント等でご確認ください。 |
| [ChatGPT 4o] ○ Mrs. GREEN APPLEの最新配信曲の中から、以下の3曲をご紹介します。 ダーリン 2025年1月20日にリリースされた楽曲で、NHK総合『Mrs. GREEN APPLE 18祭』のテーマソングとして制作されました。 ビターバカンス 2024年11月にリリースされた楽曲で、映画『聖☆おにいさん THE MOVIE～ホーリーメンVS悪魔軍団～』の主題歌として書き下ろされました。 familie 2024年8月9日にリリースされたデジタルシングルで、ホンダの新型車「FREED」のCMソングとして使用されています。 |
試用４：web検索性能
試用３の追試として、指示すればweb検索してくれるか、PLaMoだけ試しました。
| 方法 | 下記を入力し、これらを確認してみる。 ・web検索等のアクションが起こった ・回答が正しい [入力文] ミセスグリーンアップルの配信中の最近の３曲を教えて下さい。 その情報は以下のURLにあります。 https://ja.wikipedia.org/wiki/Mrs._GREEN_APPLE |
| 結果 | [PLaMo Chat] × 検索実行：× 回答正解：× |
| メモ | やはり、検索実行はされないようです。 |
以下は実際の回答文です。
| 入力：「ミセスグリーンアップルの配信中の最近の３曲を教えて」+URLアクセス指示 (実行2025/1/27) |
|---|
| [PLaMo Chat] × 申し訳ありませんが、ご提示いただいたURLのサイトには、Mrs. GREEN APPLEの最新曲を中心にお知らせするページは見当たりませんでした。アーティストの最新曲を知るには、公式サイトや公式SNSアカウント、音楽配信サイトなどを確認することをおすすめします。 Mrs. GREEN APPLEの最新曲を３つ挙げますと、以下の楽曲が挙げられます。 １．ダンスホール(2023年5月10日デジタルリリース) フジテレビ系ドラマ木曜劇場『私がヒモを飼うなんて』主題歌 ２．ケセラセラ(2023年4月12日デジタルリリース) 日本テレビ系水曜ドラマ『私結婚できないんじゃなくて、しないんです』主題歌 ３．私は最強(2022年6月22日デジタルリリース) 映画『ONE PIECE FILM RED』劇中歌 上記はあくまで一例であり、最新曲についてはご自身でも公式サイトなどでご確認ください。 他にも多くの素敵な曲を発表していますので、ぜひ聴いてみてくださいね。 |
| [ChatGPT 4o] 未実施 |
試用５：開発業務でリアルに使ってみる
実際に業務で使ってみて、解決するか試しました。
| 方法 | 以下を入力し回答を得て、実際の対象環境で操作をしつつ、追加質問を繰り返しながら、最終的に解決するか確認しました。 [入力文] 私はSlackを使っています。Slackの左メニューの中に、自分でリンクボタンを置きたいのですが、できますか？ 場所は、左メニューの下の方が良いですが、どこでも良いです。リンクはHTML＋Javascriptで作成したいです。可能なら、やり方を教えて下さい。 |
| 結果 | [PLaMo Chat] △ 方法提案：あり(１件) 操作手順の正確さ：△ 解決：× [ChatGPT 4o] ○ 方法提案：あり(３件) 操作手順の正確さ：○ 解決：○ |
| メモ | 提案された手順が自分の画面で実行できる事が、やはり重要でした。 その観点で「検索実行」と「スクショ添付」の機能を持つGPTはやはり強かったです。（GPTの方は、以前の記事で試行(2025/1/10)） |
以下は、それぞれのやりとりを私が要約したものです。
| やり取りの要約 |
|---|
| [PLaMo Chat] △ (実行2025/1/27) １．「Custom Static External URL」で可能、とまず提示あり。 ２．詳細手順を聞くと、「カスタム静的外部URL」があるはず、という文脈で色々説明あり。 ３．私の画面で、その手順が実行できず、質疑応答を繰り返した。 ４．結局「カスタム静的外部URL」は今は存在しない可能性あり、slackサポートに聞いて、と展開。 ５．他の方法は？と聞くと、「ブックマーク」で、と回答あり。 ６．その案自体の質疑応答をすると、実現不可に転じて、ここで時間切れのギブアップ。 |
| [ChatGPT 4o] ○ (実行2025/1/10) １．以下3通りの方法を紹介された。 方法1: Slack App（カスタムアプリ）の「ホームタブ」を利用する 方法2: Slackカスタムショートカットを作成する 方法3: ブラウザ拡張機能を使う ２．それぞれの長所短所を知りたくて、その質疑応答をした。 ３．権限状態の確認が不要な方法が良い、と自分で理解でき、それを最短でやれる方法3でやる事にした。 ４．方法３の手順の細かい質疑応答を繰り返した。 ５．自分の画面との差異も少しあったが、会話や画像添付で吸収できた。そして、最終的に完成。 |
まとめ
１．PLaMo Chatを触らせて頂きました。先日試用したELYZA LLM for JPと同様に基本的なテキスト生成は良く、とりわけ本ツールは生成速度が速かったのが印象的でした。
２．小型言語モデルの強みを活かすためにも、今後の更新版では検索やスクショ添付等の補完処理が整備される事を期待してしまいました。
３．今回は時間切れで、APIの確認が出来ませんでした。カード登録が必要なので、そのあたりの手続きを済ませて、また試してご紹介できればと思っています。
４．インド国内ではBharatGPTというLLMが頑張っているみたいです。日本の皆さんも国内LLMを頑張ってください。私も頑張ります。