技術 プログラム [linux]ファイル名称に日付が入っているものを指定してコピーする方法 PR 2016-03-03 2021-10-25 # 前日日付を設定 before_ymd=`date --date "1 day ago" "+%Y-%m-%d"` #ファイル名称に日付が入っている場合、それをカレントディレクトへコピーする cp /home/user/test_data_${before_ymd}.csv ./ 毎日データが生成されて保存されているものから、対象日付(上記では前日)のデータのみ取得したい場合に利用。 この記事が気に入ったら『目黒で働く分析担当の作業メモ』にご支援をお願いします! ※OFUSEに飛びます
技術 【bigquery】テーブル名にワイルドカード指定が可能 パーティショニングされたテーブルや日付毎に保存したテーブルから一気にデータを 抽出する場合、普通に処理しようとすると以下のように大量なコード...
技術 [python]query関数で「ValueError: unknown type object」などが出た時の対処コード # object型に変換 df = df.astype(object) # int型に変換 df = df.astype(int) # fl...
技術 [python]colab上でのcatboostパラメータチューニングコード例 RMSEを最適化する場合のコード例 # optunaをインストール !pip install optuna # ライブラリをインポート im...
技術 [bigquery]テーブルからカラム名をワイルドカード検索する SELECT table_schema , table_name , column_name FROM dataset.INFORMATIO...
技術 Snowflakeの落とし穴!タイムスタンプ比較で意図せぬ結果になる時の対処法 SnowflakeでSQLを書いていて、「同じ日付なのに、なぜかa_date <= b_dateが期待と違う結果になる…」といった経験...