技術 [R]データの集計時のおすすめライブラリ(dplyr) PR 2019-02-20 2021-12-18 SQLに慣れてる方がR言語を使って、データ集計を行う場合はdplyrが便利です。 qiitaのブログで詳しく書いてる方がいたのでリンクのみ↓ https://qiita.com/matsuou1/items/e995da273e3108e2338e この記事が気に入ったら『目黒で働く分析担当の作業メモ』にご支援をお願いします！ ※OFUSEに飛びます
技術 【トレジャーデータ】PRESTOにおけるパフォーマンスチューニングメモ 大量データの処理を行う場合などで処理効率を上げるのに使うコードを書いていきます。 SMART_DIGEST() : 文字列を短いハッシュ値に...
技術 [トレジャーデータ]PRESTOでテーブルのカラム名を一覧取得する SELECT column_name FROM information_schema.columns WHERE table_schema ...
技術 【トレジャーデータ】Prestoでランダムサンプリングする方法 50%のデータをランダムで取得する方法 SELECT * FROM DB.table TABLESAMPLE BERNOULLI(50)...
技術 [memo]dbt debugで「'NoneType' object has no attribute 'close'」が出た時の解決策（BigQuery環境） はじめに dbtからBigQueryへの接続テストを行う際、dbt debug を実行すると以下のエラーが発生することがあります。 'Non...
技術 DuckDB × dbtで始める、クラウド不要のモダンデータエンジニアリング入門 はじめに 「dbtを試したいけれど、BigQueryやAWSの設定は面倒…」「まずは自分のPCの中だけで完結させたい」 そんな方に最適なのが...
