AWS 【Athena】ExcelからODBC接続でERROR [HY000] [Simba][Athena] (1040)
ExcelからAWS AthenaへODBC接続して、テーブルのデータを取得しようとしたところ、エラーが発生しハマりましたので解消方法を記載しておきます。 エラー内容 ExcelからODBC経由でAthenaへ接続するとテーブル名などは表示...
AWS 
Tableau 【Tableau】日別データのグラフで曜日をわかりやすく表示
Tableauで日別データのグラフを作成した時に、一目見て特定の曜日（土日祝など）がわかるようにしたいことがあると思います。本記事では、日別データの折れ線グラフにおいて、土日祝の背景に色をつける方法を記載します。以下のグラフを作成してみます...
Python 【Python】PyAutoGUIでコロンがアスタリスクになる時の対処法
PyAutoGUIで文字列入力させるプログラムを作成していたところ、コロン「:」を入力させようとするとアスタリスク「*」になってしまいました。 フルパスを自動入力させたいのですがうまくいかず、対処方法を調べてみると以下のファイルを直接編集す...
Python 【Jupyter Notebook】コードの入力補助機能
Jupyter Notebookでは、デフォルトでコードの入力補助機能が使えません。Nbextensionsの補完機能を利用する方法を記載します。 必要なライブラリをインストールし、コマンドを実行します。 pip install jupyt...
Tableau 【Tableau】都道府県別人口データで相関行列を作成
Tableauで相関行列を作成したかったのですが、作成にやや手間取ったため方法をまとめます。 使用データ 今回は、政府統計の総合窓口（e-Stat）で公開されている「都道府県・市区町村のすがた（社会・人口統計体系）」の市区町村データを使用し...
Mathematics 【Python】母平均の差の検定
Pythonを利用して、2つの正規分布の母集団平均に差があるかの検定を行ってみます。 母平均の差の検定のパターン 2つの母平均の差に関する検定を行う場合、以下のパターンが考えられます。 標本に対応がない場合母分散が既知の場合正規分布による検...
Mathematics 【Python】独立性のカイ二乗検定
アンケート結果、ABテスト結果などに有意な差があるかどうか、カイ二乗検定を利用して確認できます。Pythonを使用して簡単に実施してみます。 独立性の検定 以下のようなクロス集計表を考えます。 \(B_{1}\)\(B_{2}\)…\(B_...
Python 【Python】基本的な整数最適化問題を解いてみる
Pythonを使って、基本的な整数最適化問題の一つである多制約ナップサック問題を解いてみます。後半に参考書籍も紹介しています。 多制約ナップサック問題 多制約ナップサック問題は、以下のように定式化できます。 maximize Σvixisu...
Python 【Python】AthenaへSQLを発行しSELECT結果をデータフレームに取得する方法
AWSのAthenaでは、S3内のデータをPrestoベースのSQLを使用して参照できます。 フラットファイルにクエリで検索をかけられます。 私も業務でAthenaを使用していますが、PythonからAthenaへSQLを発行したいケースは...
Python 【Python】基本的な線形最適化問題を解いてみる
Pythonを使って、基本的な線形最適化問題を解いてみます。後半に参考書籍も紹介しています。 線形最適化問題とは 一般的に線形最適化問題は以下の式で表されます。 minimize cTxsubject to Ax ≤ b, x∈ℝ mini...