技術 SQL [SQL]index張っても重い場合→レコードの重複状態確認 PR 2015-08-23 2015-08-23 index張っても、以下のようなデータの場合 「商品IDを利用して他テーブルと混ぜ合わせてレコード抽出」しようとすると、めっちゃ重くなります! 対策↓ ※index張る項目はPKとして扱う事が多い気がしますが、実際にはPKにしなくてもいけちゃうので、 ついつい見落としがちになる場合もあるかと。 この記事が気に入ったら『目黒で働く分析担当の作業メモ』にご支援をお願いします! ※OFUSEに飛びます
技術 [bigquery]ウィンドウ関数で作成した項目をフィルタする方法(QUALIFY句) QUALIFY句は、ウィンドウ関数の結果に基づいて行をフィルタリングする時に利用します。 従来のWHERE句だと指定できませんでしたが、QU...
技術 [python]LGBMでValueError: DataFrame.dtypes for data must be int, float or bool. Did not expect the data types in fields xxxx が出た時の対処方法メモ # 項目のタイプが処理できないというエラーのため、astypeで変換してあげればOK df = df.astype(float) # 対象項...
技術 GitHubで直接編集した後の push エラー解決法 手動でgithub上のREADMEなどを修正した後、ローカルでgit pull せずに開発進めてしまった時の対策についてメモ 事象 GitH...
技術 [python]google colab上でカイ2乗検定を行う方法 カイ2乗検定では、2群の割合の差が意味のある差なのかどうか?を検定する 例えばABテストを行った場合にちゃんと効果があったかどうか?を検証し...