VirtSBM

提供:TogoWiki

2017年10月24日 (火) 09:28時点におけるAtsuko (トーク | 投稿記録)による版
移動: 案内, 検索

SBM Extractor for Local Virtuoso

背景

  • 巨大なデータはhttp経由だとクロールがよく失敗する,あるいは時間がかかりすぎる
  • ローカルなマシンにダウンロードしてVirtuosoに入れてもSPARQL経由だとやはりよく失敗する
  • 周囲に Virtuoso 使ってサービスしてる人多い
  • Virtuoso の JDBC (Java版ODBC) 叩く抽出ツールがあると良さそう

SPARQLthon61 での作業

  • JDBC経由のアクセスを可能にできるように機能追加する
  • 手元のマシンで新機能を試したら(当たり前だけど)SPARQLエンドポイント通すよりかなり速くなった
    • どのくらい差が出るかtimeで簡易比較
個人用ツール