talkCrawler

Summary

Talk-ja -- OpenStreetMap Japanese talk の過去の記事をクロールして, ローカルデータベースに収集する。

Development

• Used by NetBeans 8.2
• OpenJDK 8

External library

• hayashi.jar - hayashi lib
• javax.json.jar - JSON parser
• commons-compress-1.18.jar - Apache Commons Compress
• postgresql-42.2.4.jar - PostgeSQL JDBC driver

build

Development environment

1. curlmonthly index を取得する
3. 生成された「統計データ」と「ベクタタイル」を GitHub に プッシュ(push) する
4. ついでに、Raspi3にある「公開用のPostGIS」にも「データ」をコピーする

処理