Context Pipeline〜DiscordメッセージをPivotサービスに投入
一つ前の投稿の続き。 Discordチャンネルのメッセージを、 Giteaのリポジトリにアーカイブ添付画像をMinIOに保存メッセージとメタデータをQdrantに保存Pivot用のFact生成Pivot Gatewayを … 続きを読む
一つ前の投稿の続き。 Discordチャンネルのメッセージを、 Giteaのリポジトリにアーカイブ添付画像をMinIOに保存メッセージとメタデータをQdrantに保存Pivot用のFact生成Pivot Gatewayを … 続きを読む
今日は朝早くからZIKUU Context PipelineのDiscord用パイプラインの開発をしています。 このプロジェクトは外界(外部のサービスやサイト)の情報を、すべて内部に引き込んで構造化するプロジェクトです。 … 続きを読む
JAXAのAPIを使って人工衛星データを収集してデータベースに保存、それをUIから観察するという骨格部分ができました。 みたいな機能を持つことになります。 最終的には、 を取り込んで、 という観測システムが完成します。 … 続きを読む
ZIKUU v1.0が自分自身を説明できて、問題が起きたときに原因を探ることができる仕組みがZIKUU Repository Explorer(以下、Repository Explorer)です。 ZIKUUでは、ソフト … 続きを読む
このWorld Eyeは国際ニュース配信を集めて、トピック/出来事/配信社/時間枠でPivot断面を切り出して、世界の報道の温度を俯瞰する観察装置です。Pivot Serviceのクライアントアプリの1つという位置づけに … 続きを読む
最近になって、モデルを大きく賢くすることだけでは解決しないんじゃないかという疑問と、その対策の研究が多く出てくるようになった。それだけ多くの人がAIを実用しようと努力しているということだろうと思う。 例えば、この論文のよ … 続きを読む
世界地図に国際ニュースがマッピングされて温度を観測できるようになったので、次は個別のニュースを読めるようにします。 昨日までは、 という機能でしたが、今日は、 という機能を追加しました。 これでニュースを読む機能ができま … 続きを読む
Pivotサービス側の国際ニュースFactに時刻まで入ったDimensionがなかったので、まずは、既存のデータベースのデータのバックフィルと、新たに投入されるデータからのDimension抽出のコードを直しました。 こ … 続きを読む
Pivotの観測軸(Dimension)には離散値と連続値の二種類に対応しています。離散値については、行と列に配置して多次元意味空間のスライスに使い、連続値については、スライスした意味空間の変化を見るために使います。 今 … 続きを読む
画面上部に時間枠 を選べるようにし、その下にスライダーを配置して、検索するニュースの時間枠を動かせるようにしました。 スライダーを動かすと、地図のヒートマップが変わっているのがわかると思います。