タグ: dbo

eStatから国勢調査の小地域の境界データをダウンロードしSQL Serverにアップロードする

　国勢調査の結果がeStatに掲載され始めている．今回は小地域の境界データをダウンロードし，SQL Serverにアップロードするまでの記録を記す．

　QGISのブラウザパネルにはMS SQL Serverがある．ODBC接続が可能と公式には記述があるが，実際にやってみると手こずることが多かった．今回はQGISからSQL Serverに接続した際の経緯を記述する．

　ROC曲線の閾値を求めるストアドプロシージャまたはインラインテーブル値関数をSQL Serverで定義するでは単一のレコードを返すストアドプロシージャ，またはインラインテーブル値関数を作成した．今回は引数の最小値と最大値を渡して複数行のレコードセットをテーブルとして返すストアドプロシージャ，またはユーザー定義のインライン関数を定義したい．

　前回の記事では階乗の自然対数を求めるユーザー定義関数をSQL Serverで作成するを記述した．今回はそのユーザー定義関数を用いてFisherの直接確率を求めるストアドプロシージャを記述する．

　SQL Server でウィンドウ関数を使い，1行前の行を取得するではウィンドウ関数を用いて1行前の行を取得した．今回は RANK 関数，NTILE 関数を用いて順位，四分位を得る．

　熱中症の搬送人員と最高気温との相関関係を可視化し閾値をχ二乗検定するでは最高気温と搬送数をプロットした．今回は気象庁から湿度のデータをダウンロードし，重症度別にプロットして可視化する．

　前章では，空間参照系の背後にある理論を紹介し，異なる種類のシステムが地球上の特徴を記述する方法を説明した．本章では，これらのシステムを適用して SQL Server 2008 における新しい空間データ型を使って空間情報を蓄積する方法を学んでもらう．

　e-Stat を渉猟していると面白いファイルを見つけた．国勢調査は 1920 年から開始されており， 2020 年 3 月現在では最新の調査結果は 2015 年のものである．20 回分の人口データが一つのファイルにまとめられており，グラフ化するには格好のデータである．

　年齢（5歳階級），男女別-都道府県（大正9年～平成27年）というファイルである．リンク先のページにはファイルが 3 つあるが，最後のものが最も粒度が細かいので，これをグラフ化する．

　また面倒な統計を見つけてしまった．Power Query に食わせれば早いのかも知れないが，どうにも埒が明かないので手動でデータを整形することになった．頼むから第一正規形で公開してくれ…