ZIKUU語彙集を作っていて明確になったこと
LLMで推論をするときに参照するベクターデータの初段と、ゆくゆくはファインチューニングによってLLMも基本的な振る舞いとして学習させるために作っているZIKUU語彙集。 これは言葉の概念を1行か2行で定義するという作業で … 続きを読む
LLMで推論をするときに参照するベクターデータの初段と、ゆくゆくはファインチューニングによってLLMも基本的な振る舞いとして学習させるために作っているZIKUU語彙集。 これは言葉の概念を1行か2行で定義するという作業で … 続きを読む
なかなかローカルLLMを使い切るのは難しいと思ってます。プロンプトチューニングをするか、RAGか、ファインチューニングかという選択・組み合わせの他にも、どうプログラムの中に組み込んで、システムに統合していくのか。考えるこ … 続きを読む
先日は、下の図の青矢印の部分を実装しましたが、今日は緑矢印の部分を実装しました。 Discordで論文検索をすると、LLMを使って論文エントリに変換してから、Giteaにプッシュします。 Giteaは、新たな論文エントリ … 続きを読む
前回の投稿の続きです。 大抵の自治体は、コンサル任せの責任回避、前例主義なので、それに抵触することはやらない。 なので、少人数でやるならという話を続編として書く。 たぶん、生活費や建設費が心配だと思う。それを考慮して、ざ … 続きを読む
結構、そんな自治体は多いように思う。 本稿は、そんな自治体への提案のつもりで書いた設計書である。 1. 現状認識 →従来路線では回復しない 2. 発想の転換 →余っている資源を中枢に 3. インフラの自立 →災害時も止ま … 続きを読む
上の図はZIKUU v1.0(共同体コア)を構成するコンポーネント群です。 今日はこの中の青線の部分(パイプライン)を開発しました。 先日開発したDiscordの論文検索ボットで、検索を実施した様子です。ここから自動的に … 続きを読む
先週は、論文検索ボットを開発しました。主要な論文サイトから、キーワード検索して、所定の形式に整えてくれるボットです。 今日は、その検索結果を、塾のサーバーで動くGitea(GitHubのローカル版)にプッシュすると、Gi … 続きを読む