ポップアップ

都道府県ごとの河川データを1つのcsvファイルに変換する

　河川データを都道府県別ではなく，水域別に抽出したい．そんな動機から QGIS と EXCEL の間を行ったり来たりしている．QGISで都道府県ごとの河川データをマージするではかなり無謀なことをやった．今回はもう少し丁寧にデータを扱ってみたい．

　Microsoft の公式サイト，英語なら取得は容易であるが，当然日本語は取得できない．今回は日本語サイトから英語と日本語の両者を取得しようと試みた．

　結論から言うと，この記事で述べた方法で全ての日本語と英語とが分離できたわけではない．2 バイト文字と 1 バイト文字との分離という手法を用いたが，最終的には手動での対応が必要だった．

　e-Stat を渉猟していると面白いファイルを見つけた．国勢調査は 1920 年から開始されており， 2020 年 3 月現在では最新の調査結果は 2015 年のものである．20 回分の人口データが一つのファイルにまとめられており，グラフ化するには格好のデータである．

　年齢（5歳階級），男女別-都道府県（大正9年～平成27年）というファイルである．リンク先のページにはファイルが 3 つあるが，最後のものが最も粒度が細かいので，これをグラフ化する．

　総務省統計ポータル e-Stat からのデータに全国の市区町村の人口推移があった．マーク・ブキャナンの「歴史はべき乗則で動く」の p 261 に「人口が半分の都市は四つある」とある．本当だろうか．検証してみた．

　文部科学省には日本標準食品成分表のデータがある．食品の栄養素の計算に用いられるデータで，食品成分データベースやフィットネス，ダイエット関連アプリのデータベースの基本となっているものである．

　このデータは 5 年ごとに更新されており，最新のデータは 2015 年のものである．次の更新は 2020 年の予定である．今回の記事ではこのデータをダウンロードし，クレンジングを行う．