技術 プログラムpython [python]特定フォルダに入っている.txtファイルを順番に読み込むコード import os # 読み込むフォルダのパスを指定 folder_path = '/Users/xxxxx/Documents/' # フォルダ内の.txtファイルを取得 files = # ファイ... 2024-12-02
技術 プログラムpythonAPI生成 [API] OpenAIのGPT-4o-miniとAPI-keyでやりとりするpythonコードサンプル 事前に、OpenAIのプラットフォームでAPI-KEYを取得しておき、exportコマンドで変数設定 export OPENAI_API_KEY=ここにapi-keyを設定する #注意! 通常の変数の... 2024-12-02
技術 プログラム生成AIAPI [API] OpenAIのGPT-4o-miniとAPI-keyでやりとりするcurlコマンドサンプル 事前に、OpenAIのプラットフォームでAPI-KEYを取得しておき、exportコマンドで変数設定 export OPENAI_API_KEY=ここにapi-keyを設定する #注意! 通常の変数の... 2024-12-02
技術 生成AIopenAI [openAI]プロンプトのトークン数を数える方法 以下へアクセス https://platform.openai.com/tokenizer Tokenizerの画面が表示されるので、モデルを選択して、トークン数を数えたいプロンプト(文字)を入力する... 2024-11-24
技術 プログラムpython [python]データフレームから項目を削除するコマンド # ライブラリをインポート import pandas as pd # データフレームを準備 train_df = pd.read_csv('train.csv') # 特定項目を削除(削除したい項目... 2024-11-24
技術 プログラムpython機械学習 [python]colab上でのcatboostパラメータチューニングコード例 RMSEを最適化する場合のコード例 # optunaをインストール !pip install optuna # ライブラリをインポート import optuna import numpy as np... 2024-11-23
技術 プログラムpython機械学習 [python]colab上でのlightgbmパラメータチューニングコード例 RMSEを最適化する場合のコード例 # optunaをインストール !pip install optuna # ライブラリをインポート import optuna import numpy as np... 2024-11-23
技術 プログラムpython自然言語処理 [python]NLTKを使って、2つの自然言語の類似性を確認する方法 以下は、NLTK(Natural Language Toolkit)を利用した自然言語(英語)の類似性を調べるコードです import nltk from nltk.corpus import sto... 2024-11-19
技術 プログラムpythonmetabase [python]metabase apiを使って内部SQLで特定文字列の利用状況を調査する方法 metabase(BIツール)で内部に作成したSQL情報はAPI経由で一括抽出できたのでサンプルコードを残します。 用途としては、特定文字列が入ってるmetabaseのカードを洗い出す場合に使います。... 2024-11-19
技術 プログラムpython [python]dfの特定項目の件数と割合を算出する方法 # pandasのimport import pandas as pd # 項目のデータ別件数を取得 result = df.value_counts() # 項目のデータ別件数比率を取得 perce... 2024-11-18
技術 プログラムpython [python]dfの特定項目から4分位数を算出する方法 ## 特定項目から4分位数を算出する ## 以下ではscore項目から0,25%,50%, 75%, 100%の値を算出する df.quantile() > 0.00 0.0000 > 0.25 7.... 2024-11-13
技術 プログラムpython [python]dfからランダムサンプリングする方法 ## dfから70%のデータをランダムサンプリングする df.sample(frac=0.7)... 2024-11-13