Blog

ollama-uiで日本語LLMと会話する

ブラウザでLLMが使えるようになりました

ollama-uiはChromeの拡張機能

 先日,ローカルLLMと会話をしたときはターミナルを使っていました。その後もollamaやLLMについて調べていくと,WebブラウザでローカルLLMが使えるChromeの拡張機能があることがわかりました。

ollama-uiはその中の一つで,UIがシンプルで分かりやすい感じだったので選びました。ローカルLLMの切り替えやチャットの保存もできるので基本機能はしっかり押さえている感じです。

拡張機能をインストールするだけなのでお手軽で,Webブラウザで簡単にローカルLLMと会話できるので便利です。

日本語LLMも追加でインストールしました

 こちらこちらのサイトで日本語で会話ができるLLMについて調べて,cyberagent/calm2-7b-chatとLlama 3 ELYZA JP 8Bをインストールしました。インストールするとすぐにollama-uiで利用可能になります。
動作チェックということで現在インストールしているローカルLLMとChatGPTに同じ質問をしてみました。質問は「秋の俳句を作ってください」にしました。

gemma2.jpg
Gemma2
minicpm.jpg
Minicpm-v
calm2.jpg
cyberagent/calm2-7b-chat
elyza.jpg
Llama 3 ELYZA JP 8B

chatgpr.jpg
ChatGPT

それぞれ答え方も違いました。中国語あり,これは俳句か?というものもありましたが,さすがにChatGPTは的確ですね。ほかの質問もいくつかしたのですが,個人的にはGemma2はしっかり答えてくれて好印象でした。ほかの3つはちょっと微妙な感じです。

今後はStable Diffusionで利用するために画像をプロンプトに変換できるLLMをインストールしていこうと考えています。

この記事へのコメント

コメントはまだありません。

コメントを送る

必須
必須  
※ メールアドレスは公開されません
任意
必須
Loading...  画像の文字を入力してください
1
2
3
4
5
6
7
8