技術 プログラムpythongoogle [GCP]Search Console API利用時に、"User does not have sufficient permission for site 'https://xxxxxx.com'.が出た時の対処方法 このエラーの対処が結構ややこしかった為、blogに備忘として残します。(2023/8/19時点の環境) 事前準備 まず、エラーメッセージを見る限り、サイトへのアクセス権限が足りてないことが問題なのは英... 2023-08-19
技術 プログラム [linux]CRONジョブの実行履歴の確認方法 grep CRON /var/log/syslog CRONジョブが実行された日付、時間、ユーザーなどの情報を含むエントリが書き込まれたログファイルから、CRONに関する情報をフィルタリングし、表示す... 2023-08-19
技術 プログラムSQLbigquery [bigquery]平均値と中央値を算出する方法 SELECT AVG(price) as avg_value, -- 平均値 APPROX_QUANTILES(price, 2) as median_value -- 中央値 FROM datase... 2023-08-14
技術 プログラムSQLbigquery [bigquery]2023/1/1などの文字列型を日付型に変換する方法 スプレッドシート上で、2023/1/1などで登録されている日付情報(STRING型になってる)をbigquery上にコネクトした後に、日付型として処理する場合に使ったコードです。 SELECT PAR... 2023-08-08
技術 プログラムSQLbigquery [bigquery]モードがREPEATEDの項目をSELECTする方法 例えば、注文単位で複数商品を同時発注可能な場合、ordersテーブルを設計した場合は以下のような構造に。 フィールド名種類モードidSTRINGNULLABLEcreated_timeTIMESTAM... 2023-08-04
技術 プログラムSQLbigquery [bigquery]データセット内のテーブル情報を取得する SQLではINFORMATION_SCHEMA.TABLESを使うことで、データセット内のテーブル情報を抽出できますが、bigqueryでは、以下のコードでも同様なテーブル情報を取得可能です SELE... 2023-08-03
技術 プログラムpython [python]matplotlibのマジックコマンドメモ ## コードセル直下にグラフを描画する %matplotlib inline ## 別ウインドウにインタラクティブなグラフを表示する %matplotlib tk ## コードセル直下にインタラクティ... 2023-07-12
技術 プログラムSQLbigquery [bigquery]JST時刻をUTC時刻へ変換する方法 日本のサービスを利用する限りはあんまりないと思うのですが、JST時刻をUTC時刻に変換したい時のコード SELECT created_at, FORMAT_TIMESTAMP('%F %T UTC',... 2023-07-07
技術 プログラムSQLbigquery [bigquery]文字列の左右に任意の文字列を追加する SELECT LPAD('A', 5, '0'), -- Aの文字の左側に0を付与。合わせて5文字とする RPAD('B', 5, '0') -- Bの文字の右側に0を付与。合わせて5文字と... 2023-06-28
技術 プログラムpython [python]データフレームの項目名を日本語表記に変換する # ライブラリ読み込み import pandas as pd # カラム名を日本語に変更 df = df.rename(columns={ "date": "日付", "name": "銘柄名", ... 2023-06-26
技術 プログラムpython [python]streamlitでhtmlタグ表示するコード ## streamlitのインストール pip install streamlit ## ライブラリ読み込み import streamlit as st import pandas as pd ##... 2023-06-12
技術 プログラムSQLbigquery [bigquery]REPETED(配列)項目から特定文字列を含むレコードを抽出する SELECT * FROM dataset.table WHERE 123 IN UNNEST(ids) 上記のコードでは、ids(配列項目で複数の値が格納されている項目)から123という値が含まれた... 2023-06-10