by shigemk2

当面は技術的なことしか書かない

Treasure Data

missing eof at 'by' near 'group'

TreasureDataでSQL流そうと思ったら表題のエラーに見舞われたので、どうしたものかなと思っていたらHiveの問題でした。 Hive Union Group By Error hadoop - Hive Union Group By Error - Stack Overflow select COUNT(distinct primary), COUNT(primary), m…

1日前から今までのレコードを取得したかった

だいたいこんな感じだ。 order byはおまけです。 SELECT TD_TIME_FORMAT(time, 'yyyy-MM-dd HH:mm:ss', 'JST') AS JTIME, td_path FROM table WHERE TD_TIME_RANGE(time, TD_TIME_ADD(TD_SCHEDULED_TIME(), "-1d"), TD_SCHEDULED_TIME()) ORDER BY JTIME DES…

TreasureDataでAPIキーを使ってcurlを叩く

td-agent(fluentd)の運用でTreasure Data使ってみたメモ⑤ - REST API使うメモ - tweeeetyのぶろぐ的めも td-agent(fluentd)の運用でTreasure Data使ってみたメモ⑤ - REST API使うメモ - tweeeetyのぶろぐ的めも TDのAPIキーを使ってcurlでいろいろな情報を引…

TreasureData JavaScript SDK

TreasureData - Treasure Data JavaScript SDKの使い方 - Qiita TreasureData - Treasure Data JavaScript SDKの使い方 - Qiita Treasure Data JavaScript SDK | Treasure Data Treasure Data JavaScript SDK | Treasure Data headタグにライブラリのJSを突…

td-agentのインストール方法を眺めてみる(RedHat系)

td-agentのインストール方法について。 Overview of Streaming Import by Treasure Agent (td-agent) | Treasure Data Overview of Streaming Import by Treasure Agent (td-agent) | Treasure Data 公式にはこういうふうにインストールしなさいと書いてある…

td-js-sdkを試してみよう

treasure-data/td-js-sdk · GitHub READMEのとおりにやればほぼ問題ない。 なお、複数のデータを同時に送ったときは、画面のTablesやJSONを見るだけではダメで、 SQLをちゃんと投げないと結果が分からない。 あと、write-only apikeyが推奨されており、持っ…

はてなカウンターのログをTreasure Dataに突っ込んでみたmk2 CSVファイルをそのままbulk import

実データで覚える Treasure Client コマンドラインリファンス 〜1.Data Import〜 - doryokujin's blog 基本的に上のリンクをそのままに。 # テーブルを作る $ td table:create test shigemk2_bulk Table 'test.shigemk2_bulk' is created. # セッションを作…

はてなカウンターのログをTreasure Dataに突っ込んでみた

はてなカウンターのログをダウンロードする はてなカウンター→ログ→ログのダウンロード ダウンロードできるものはコンマ区切りのCSVファイルです。 こんな感じの。 2014-03-01 00:01:07,xxx.xxx.xxx,https://www.google.co.jp/,"Mozilla/5.0 (Windows NT 6.1…

Treasure DataでDBとテーブルを操作するコマンド一覧

データベース データベース一覧の表示 $ td dbs データベースの作成 $ td db:create test_db データベースの削除 $ td db:delete test_db テーブル テーブルの作成 $ td table:create test_db test_table テーブルの一覧 (DB指定) $ td tables test_db (DB指…