ニュースフィードを投入してみる〜Pivotサービス
国際ニュースのフィードをPivotに取り込んでみました。 ニュースソースからDimensionを抽出するのにローカルLLMを使っているので、データベースへの保存に少し時間がかかりますが、ほぼ正確にDimensionの抽出 … 続きを読む
国際ニュースのフィードをPivotに取り込んでみました。 ニュースソースからDimensionを抽出するのにローカルLLMを使っているので、データベースへの保存に少し時間がかかりますが、ほぼ正確にDimensionの抽出 … 続きを読む
Pivot UIがほぼ完成しました。 これが操作前の状態。 評価軸パレットにDimensionが並んでいます。これらがこのFactが持つ観測軸です。このDimensionを列/行と書かれているスロットにドラッグ&ドロップ … 続きを読む
上のスクリーンショットがFact管理画面で、motorcycle_salesというFactを定義している様子。 maker、country、area、year, quaterという観測軸でsalesとprofitを観測す … 続きを読む
今日はPivotサービスのFactを管理する機能を実装しました。 Factは多次元観測窓です。 Dimension(観測軸)を複数持ち、観測軸の数分の多次元意味空間を作り出します。 Pivotサービスは、その多次元意味空 … 続きを読む
上の画面はPivotサービスの管理画面です。 このサービスは、 データを集める(ブログ、国際ニュース、国内ニュース、ラジオ、人工衛星、論文、活動記録など)↓LLMを使って、データから観測軸=Dimensionを抽出する( … 続きを読む
ZIKUUシステムの基盤部分なので、慎重に設計をやり直して、プロジェクトを作り直すくらいの気持ちで再出発します。 Pivot Serviceは大量のデータからなる多次元意味空間から、複数の観測軸を使って、2次元空間に写像 … 続きを読む
すでにサーバーで本番運用しているRadio Mindですが、今は毎朝文化放送を30分録音して自動文字起こしを実行しています。 いずれ、この文字起こしデータを知識化するパイプラインを組み込む予定ですが、知識化方法の検討を先 … 続きを読む