ZIKUU基礎教科書をQdrantに投入する

今日は、1組のIngesterとパイプラインを作って、ZIKUUの基礎教科書(全26巻)をベクターDBに入れました。 かなりのボリュームのある教科書なので、ベクターDBに投入するのに時間がかかると思っていましたが、そうで … 続きを読む

YouTubeを使った調査と加速社会

YouTubeには教材が溢れています。人に説明するのが得意(好き)な米国人の大学教授がたくさんいて、優良な教材が無料で手に入る。 英語が達者な人は、その分野に精通している人なら、英語のまま動画を観て理解できると思いますが … 続きを読む

論文処理用のNerveパイプラインからQdrantへ

今日は、検索した論文の要約を生成してQdrantに投げ込む処理(上の図の緑色矢印の部分)を実装しました。「論文処理用のNerveパイプラインを開発する」という投稿の続きです。 実際の運用では、 ① Discordの専用チ … 続きを読む

論文処理用のNerveパイプラインを開発する

先日は、下の図の青矢印の部分を実装しましたが、今日は緑矢印の部分を実装しました。 Discordで論文検索をすると、LLMを使って論文エントリに変換してから、Giteaにプッシュします。 Giteaは、新たな論文エントリ … 続きを読む

Discord論文検索とNerveをつなげる

上の図はZIKUU v1.0(共同体コア)を構成するコンポーネント群です。 今日はこの中の青線の部分(パイプライン)を開発しました。 先日開発したDiscordの論文検索ボットで、検索を実施した様子です。ここから自動的に … 続きを読む