Context Pipeline〜ZIKUU基礎教科書をPivotサービスに投入
今日はZIKUU基礎教科書をPivotサービスに投入するプログラムを開発しました。 すでにKindleで販売中のZIKUU中高生向け基礎教科書（全16巻）とは別に、ZIKUU内部で使用する、もっと濃い内容のZIKUU基礎 … 続きを読む
LLM
Context Pipeline〜ZIKUU Research LibraryをPivotサービスに投入
ZIKUU Research Library (ZRL)は、Discordボット/Gitea/ローカルLLM/Nerve/Qdrantが連携するシステムで、DiscordでarXivの論文検索リクエストを送信すると、ボッ … 続きを読む
Context Pipeline〜DiscordメッセージをPivotサービスに投入
一つ前の投稿の続き。 Discordチャンネルのメッセージを、 Giteaのリポジトリにアーカイブ添付画像をMinIOに保存メッセージとメタデータをQdrantに保存Pivot用のFact生成Pivot Gatewayを … 続きを読む
Context Pipeline〜Discordメッセージをベクターデータベースへ
今日は朝早くからZIKUU Context PipelineのDiscord用パイプラインの開発をしています。 このプロジェクトは外界（外部のサービスやサイト）の情報を、すべて内部に引き込んで構造化するプロジェクトです。 … 続きを読む
Earth Visionの骨格ができる
JAXAのAPIを使って人工衛星データを収集してデータベースに保存、それをUIから観察するという骨格部分ができました。 みたいな機能を持つことになります。 最終的には、 を取り込んで、 という観測システムが完成します。 … 続きを読む
ZIKUU Repository Explorer
ZIKUU v1.0が自分自身を説明できて、問題が起きたときに原因を探ることができる仕組みがZIKUU Repository Explorer（以下、Repository Explorer）です。 ZIKUUでは、ソフト … 続きを読む
World Eyeを本番サーバーに配備
このWorld Eyeは国際ニュース配信を集めて、トピック/出来事/配信社/時間枠でPivot断面を切り出して、世界の報道の温度を俯瞰する観察装置です。Pivot Serviceのクライアントアプリの１つという位置づけに … 続きを読む
ちゃんと役に立つAIに向けて
最近になって、モデルを大きく賢くすることだけでは解決しないんじゃないかという疑問と、その対策の研究が多く出てくるようになった。それだけ多くの人がAIを実用しようと努力しているということだろうと思う。 例えば、この論文のよ … 続きを読む
World Eyeの読む機能を拡張する
世界地図に国際ニュースがマッピングされて温度を観測できるようになったので、次は個別のニュースを読めるようにします。 昨日までは、 という機能でしたが、今日は、 という機能を追加しました。 これでニュースを読む機能ができま … 続きを読む
World Eyeの検索精度の向上
Pivotサービス側の国際ニュースFactに時刻まで入ったDimensionがなかったので、まずは、既存のデータベースのデータのバックフィルと、新たに投入されるデータからのDimension抽出のコードを直しました。 こ … 続きを読む