タグ: データクレンジング

環境省の捕獲鳥獣数の統計を折れ線グラフにする

　また面倒な統計を見つけてしまった．Power Query に食わせれば早いのかも知れないが，どうにも埒が明かないので手動でデータを整形することになった．頼むから第一正規形で公開してくれ…

　総務省の e-Stat から全国の市区町村の財政状況を垣間見る．衰退する都市には財政破綻の徴候が見られるはずである．今回は財政力指数，経常収支比率，実質公債費比率，地方債現在高に注目する．

　EXCEL のワークシートに格納できるレコード数は 1,048,576 行である．今回 e-Stat からダウンロードしたファイルをピボット解除したらその上限を超えてしまったのでその記事を書こう．

　総務省統計ポータル e-Stat からのデータに全国の市区町村の人口推移があった．マーク・ブキャナンの「歴史はべき乗則で動く」の p 261 に「人口が半分の都市は四つある」とある．本当だろうか．検証してみた．

　人口統計は国の将来を予測する重要な指標であるが，経済の指標である総生産も重要な指標である．これは国の元気さを示す値であり，報道では GDP と称されている．一人あたりの GDP とは生産性のことであり，国民の豊かさを示す値でもある．

　マクロ経済学についてはほぼ素人だが，データを扱うにあたり，都道府県ごとの総生産額と生産性は欠かせない指標と思われたので，調査ついでに公開しよう．

　読者がどの街に住んでいるか，俺は知らない．だが，将来読者の住む街の運命はほぼ確信を持って予言できる．今後しばらく繁栄が続くか，それとも衰退していくのかは，人口から予測できる．今日の記事ではその予測をデータを基に示す．後半は技術的な話題となる．

　日本の人口統計は総務省が 5 年おきに行う国勢調査が元になっている．日本の市の人口順位をEXCELにダウンロードして散布図に描くでは日本全国の都市の人口増減率と人口の関係を時系列で流すとどう推移するか予測した．今回はその予測が実態と合っているか乖離しているかの検証を行う．

　過去5年間の人口増減率から自治体の将来を予測するでは日本の都市の運命を占った．その元となるデータをダウンロードして散布図にする方法を述べる．

　とある件で発表の機会があり，その準備に追われている．弊社の顧客マスターから抽出した郵便番号をジオコーディングし，地図上にヒートマップを作成するという作業を行ったので，備忘録として残しておく．

　気象庁のサクラ開花日のテキストファイルでは全国の地方気象台の所在地は明らかではなかった．ジオコーディングを始めるには所在地を正確にしておくことが重要だ．手始めに全国の地方気象台の所在地を確認することにした．