データモデル

新エネルギー・産業技術総合開発機構の太陽光スペクトルデータをピボットグラフで表現する

　色の知覚(1)太陽光では，新エネルギー・産業技術総合開発機構の日射データが巨大すぎてインポートできなかった．データをある程度絞り込むことで何とかならないか，試行錯誤した結果を報告する．

　色彩に関してはこれまで先人の膨大な研究の積み重ねがある．その一端を紹介し，色の物理的性質から生理的反応への橋渡しについて考察する．

　今回は太陽光について調べた．データベースは主に National Renewable Energy Laboratory から取った．日本国内にも太陽光についてのデータベースは気象庁や新エネルギー・産業技術総合開発機構がデータを公開している．

　EXCEL のワークシートの仕様上，100 万件を超えるデータは扱えない．これは大規模なデータを扱う際の制約である．180万件のデータをPower Queryで処理してEXCELがオーバーフローした話でも述べたが，この制約を乗り越えてデータをインポートするにはデータモデルに読み込むほかはない．

　SQL Server で PowerQuery が使えればこういった制約を回避できるのだが，ないものは仕方がない．今回は PowerPivot を用いてデータモデルに蓄積したデータを取り出す方法を見つけたので備忘録として記す．

　データベースに接続して一つのテーブルをインポートするのは比較的簡単であるが，複数のテーブルを結合した状態でインポートする方法が長らく分からないままだった．

　Power Query を使ってクエリを結合する方法で解決したので備忘録がてら記事とする．

　EXCEL のワークシートに格納できるレコード数は 1,048,576 行である．今回 e-Stat からダウンロードしたファイルをピボット解除したらその上限を超えてしまったのでその記事を書こう．

　EXCEL も少しずつ進化している．かつて参考にしていた書籍も少しずつ齟齬が目立ってきたため，書籍を買い直し始めている．

　今回は EXCEL VBA について参考にした書籍を紹介したい．

　ピボットテーブルは EXCEL に初期から搭載されている分析ツールである．ピボットグラフで未だに散布図が描けないという致命的な欠陥があるが，それでも有用なツールであることに変わりはない．

　今回の記事はコードの整形ができていない．PivotTable オブジェクトのプロパティが膨大で手がつけられなかったためである．時間がある時に取り組みたい．