Import/Catalogue/Japan GSI Memorial of Natural Hazard

From OpenStreetMap Wiki
Jump to navigation Jump to search

Goals/目標

The goal of this project is to import the Natural Memorial of Natural Hazard data published by the Geospatial Information Authority of Japan (GSI) into OSM.

国土地理院が公開している「自然災害伝承碑データ」をOSMにインポートする。

https://www.gsi.go.jp/bousaichiri/denshouhi_datainfo.html

Schedule/スケジュール

Community Buy-in/コミュニティとの調整

Post import plans on the Japanese community channels (talk-ja, facebook and slack) community around 2020/9/19.

2020/9/19ごろにtalk-ja, facebook, slackのコミュニティページにインポート計画を投稿する。

https://lists.openstreetmap.org/pipermail/talk-ja/2020-September/010817.html

License approval/ライセンス確認

Send a request for permission to the GSI for approval in 2020 September .

2020/9月中に国土地理院に許諾依頼の連絡をいれ、承認をとる。

(Approved at 2020/10/9. / 2020/10/9に国土地理院から承諾を得た。 https://twitter.com/nyampire/status/1314438374720118787?s=20, I've got reply from GIS and they says OK.)

Documentation/文書作成

Prepare the document for import around 2020/9/19. Request community feedback in September.

2020/9/19ごろのコミュニティ連絡時にドラフトを作成。コミュニティのフィードバックをうけて、9月中に作成。

Import Review/レビュー

Post import plan to import-ml in 2020 October https://lists.openstreetmap.org/pipermail/imports/2020-October/006407.html

2020/10月中にimport-mlに投稿

Uploading/アップロード

Upload data in 2020 Nobember

2020/11月に実施予定 2021/2月完了

変更セット https://osmcha.org/filters?filters=%7B%22metadata%22%3A%5B%7B%22label%22%3A%22source_ref%3Dhttps%3A%2F%2Fwww.gsi.go.jp%2Fbousaichiri%2Fdenshouhi.html%22%2C%22value%22%3A%22source_ref%3Dhttps%3A%2F%2Fwww.gsi.go.jp%2Fbousaichiri%2Fdenshouhi.html%22%7D%5D%2C%22date__gte%22%3A%5B%7B%22label%22%3A%222021-01-31%22%2C%22value%22%3A%222021-01-31%22%7D%5D%7D

Team/担当

  • Request for permission to GSI / 国土地理院への申請: nyampire
  • Prepare documents / インポートページの作成: muramototomoya
  • Inform to community / コミュニティへの案内: muramototomoya
  • Prepare import data / インポートデータの作成: muramototomoya
  • OSM edits / インポートの実施: muramototomoya

Import Data/データインポート

Background/概要

Data source site/データ提供元

「自然災害伝承碑データの提供について」 https://www.gsi.go.jp/bousaichiri/denshouhi_datainfo.html

Data license/元データのライセンス

The original license is the "GSI Content Terms of Use". Permission to use the content is required.

元ライセンスは「国土地理院コンテンツ利用規約」(https://www.gsi.go.jp/kikakuchousei/kikakuchousei40182.html) である。別途OSMへの利用許諾をとる。

Import Type/インポートの種類

Only one-time import of publicly available data at 2020/09/16.

2021/1/15現在において公開されたデータを1回のみインポートする。

Data Preparation/データ作成手順

Data Reduction & Simplification/データ簡易化

In the "name" of the original data , there are a number of supplementary information in parentheses. Parenthesized portions are deleted.

インポートするデータの「碑名」には、かっこ書きで補足情報が記載されているデータが多数存在する。かっこ書き部分は削除する。

Tagging Plans/タグ付け

The original data consists of ID, name(碑銘), year of construction(建立年), location(所在地), disaster name(災害名), disaster type(災害種別), and description(伝承内容). Each data is assigned to the following tags.

「自然災害伝承碑データ」は、ID、碑銘、建立年、所在地、災害名、災害種別、伝承内容、で構成されている。それぞれのデータは次のタグに割り当てる。

  • historic=memorial
  • memorial=hazard_memorial
  • name=碑名
  • start_date=建立年
  • addr:full=所在地
  • hazard:name=災害名
  • hazard:type=災害種別
  • description:url=(伝承内容を記載したウェブページへのURL)

Note / 備考

  • Parenthesized portions are deleted as described above. 上記のとおり、「碑名」のかっこ書き部分は削除する。
  • The value of "hazard:type" is created by connecting flood, landslide, volcano, storm_surge, earthquake, and tsunami with ";". / hazard:typeの値は、洪水(flood);土砂災害(landslide);火山災害(volcano);高潮(storm_surge);地震(earthquake);津波(tsunami)を";"で接続して作成する。
  • "ID" is not used. / データのIDは使用しない。
  • "Descriptions" exceeds 255 characters, so it is difficult to fit it into a description tag. It must be referenced in an external URL. / "伝承内容"は255文字を超えるため、descriptionタグに収めることが難しい。そのため外部URLの記載とする。
  • If the year of construction is "unknown", start_date is not used. / "建立年"が"不明"の場合は、start_dateは使用しない。

Changeset Tags/変更セット

The following tags are added to the changeset. / 変更セットのタグに以下のタグを付与する。

"source" tag is not added to each POI. / 個々のPOIにsourceタグは付与しない。

Data Transformation/変換ツール

https://github.com/tankaru/Japan-GSI-Import/blob/master/Convert%20original%20geojson%20to%20osm%20format.ipynb

Data Transformation Results/変換結果

https://github.com/tankaru/Japan-GSI-Import/blob/master/natural_hazard_memorial_import.geojson

Data Merge Workflow/データアップロード手順

Workflow/手順

  1. Replace the "properties" element in the geojson file created by the GSI with the OSM specific tag. / 国土地理院が作成したgeojsonファイルのproperties要素をosmタグに置き換える
  2. Divide it into a size of about 100 objects. / 100オブジェクト程度のサイズに分割する。
  3. Load geojson files in JOSM. / JOSMでgeojsonファイルを読み込む
  4. Visually check each data for overlap with existing data. / 各データを目視で既存データと重複がないか確認する。
    1. If there are duplicates, add tags to the existing POI and remove the duplicate data from geojson. / 重複している場合:既存POIにタグを追加し、geojsonから重複データを削除する。
    2. If it is unclear whether it is a duplicate or a separate object: do not import the data. Data not imported will be recorded here. / 重複しているのか、別オブジェクトであるのか不明な場合:データはインポートしない。インポートしなかったデータはここに記録する。→全データをインポートした。
  5. Upload geojson data. / geojsonデータをアップロードする。

Conflation/既存データとの重複対策

As mentioned above, visually check each one for duplication with existing data.

上記のとおり、既存データとの重複がないかひとつひとつ目視で確認する。