banner
andrewji8

Being towards death

Heed not to the tree-rustling and leaf-lashing rain, Why not stroll along, whistle and sing under its rein. Lighter and better suited than horses are straw sandals and a bamboo staff, Who's afraid? A palm-leaf plaited cape provides enough to misty weather in life sustain. A thorny spring breeze sobers up the spirit, I feel a slight chill, The setting sun over the mountain offers greetings still. Looking back over the bleak passage survived, The return in time Shall not be affected by windswept rain or shine.
telegram
twitter
github

谷歌Gemmaローカルで高速に動作し、デバイス要件が低く、操作が簡単です。

Gemma はすでに紹介されており、コードを使用して彼とチャットする方法も紹介されています。
この方法は、開発者向けであり、比較的ハードルが高いです。
使用する際にも使い勝手が悪いです。
今日は、誰にでもより友好的な別の方法を紹介します。それは、視覚化ソフトウェアを直接使用して Gemma とコミュニケーションを取る方法です。
今日使用するソフトウェアは lmstudio と呼ばれ、多くの大規模モデルをワンクリックで実行できるソフトウェアです。

https://lmstudio.ai(魔法が必要)

画像

最新バージョン 0.2.16 では、Gemma モデル、20 億および 70 億のパラメータのモデルがサポートされています。
このソフトウェアは非常に優れており、多くのオープンソースモデルとチャットするだけでなく、OpenAI の API サービスを起動することもできます。
一般ユーザーと開発者の両方にとって非常に使いやすいです。
ソフトウェアは複数のプラットフォームをサポートしており、現在は Windows、Mac(Apple Silicon M series)、Linux の 3 つのシステムをサポートしています。
また、ソフトウェアはデフォルトで CPU を使用して推論を行うようですので、デバイスのハードルが大幅に低くなっています。
小さなモデルの推論速度も非常に優れています。

画像
ソフトウェアをインストールした後(古いバージョンのユーザーはアップグレードしてください)、メイン画面で Google's Gemma 2b Instruct のカードが表示されます。カード内で download を見つけ、クリックするとモデルのダウンロードが開始されます。
全体のプロセスは非常に簡単ですが、社内ユーザーはダウンロードできない問題に遭遇するかもしれません。
ダウンロードが完了したら、ソフトウェアのトップバーから Gemma モデルを選択し、モデルの読み込みが完了するのを待ってから会話を開始できます。

画像

ウィンドウの下部に User の後に内容を入力すると、チャットを開始できます。
中国語を直接送信することができ、理解されますが、彼は英語で返答します。

画像

読み込み中...
文章は、創作者によって署名され、ブロックチェーンに安全に保存されています。