LLM

Context Pipeline Serverを開発する準備

by

ZIKUU Context Pipelineの開発をしばらくやってきましたが、実際に動かしてみると運用に耐えられないことが明確になりました。ZIKUUのような小さな組織では、GPUは貴重な資源。その資源を様々なプログラム … 続きを読む

Context Pipeline〜文脈束から意味抽出

by

WordPress、Discord、論文、基礎教科書、ラジオ文字起こしなどのデータソースから取り込んだ各データを文脈束と読んでいます。そこには、いくつかの意味が束ねられているからです。 取り込んだデータをそのままPivo … 続きを読む

Context Pipeline〜ZIKUU基礎教科書をPivotサービスに投入

by

今日はZIKUU基礎教科書をPivotサービスに投入するプログラムを開発しました。 すでにKindleで販売中のZIKUU中高生向け基礎教科書（全16巻）とは別に、ZIKUU内部で使用する、もっと濃い内容のZIKUU基礎 … 続きを読む

Context Pipeline〜Discordメッセージをベクターデータベースへ

by

今日は朝早くからZIKUU Context PipelineのDiscord用パイプラインの開発をしています。 このプロジェクトは外界（外部のサービスやサイト）の情報を、すべて内部に引き込んで構造化するプロジェクトです。 … 続きを読む

Earth Visionの骨格ができる

by

JAXAのAPIを使って人工衛星データを収集してデータベースに保存、それをUIから観察するという骨格部分ができました。 みたいな機能を持つことになります。 最終的には、 を取り込んで、 という観測システムが完成します。 … 続きを読む

ちゃんと役に立つAIに向けて

by

最近になって、モデルを大きく賢くすることだけでは解決しないんじゃないかという疑問と、その対策の研究が多く出てくるようになった。それだけ多くの人がAIを実用しようと努力しているということだろうと思う。 例えば、この論文のよ … 続きを読む