Treasure Data - Support Engineering Team blog

トレジャーデータのサポートエンジニアリングチームのブログです。

TD概要

TreasureData Tech Talk 2022 参加者受付中!

Treasure Data サポートの上加世田です。 本日はTreasure Data主催のテックイベントの宣伝です。 techplay.jp Treasure Dataでは過去に多くのテックイベントを行ってきました。 しかしコロナやコロナやコロナ・・・等の理由により、2020年の会を最後に約2年…

Job の Status と同時実行数について

こんにちは、Treasure Dataサポートの伊藤です。 本記事ではJobのStatusとその同時実行数について説明していきます。 Job の Status について Jobが現在どういう状態なのかStatusによって知ることができ、具体的には下記5種類が存在します。 Status 説明 Que…

Jobの種類について

こんにちは、Treasure Dataサポートの伊藤です。 本記事では、Treasure Dataの要と言っても過言ではない Job について詳細見ていきます。 Jobとは Treasure Dataのコンポーネントとして、Jobというものがあります。 TDコンソールの Job Activities にて確認…

Treasure DataにおけるIDの種類とその取得方法 - その1

こんにちは、Treasure Dataサポートの伊藤です。 今回は、Treasure Dataにおける各種IDについて説明していきます。 なぜIDについて説明するのか? UserのID JobのID(Hive/Presto/Partial Delete/Result Export/Bulk Load/Bulk Import/Bulk Export) Jobとは J…

TDのデータ型について

こんにちは、Treasure Data(TD) サポートの伊藤です。 今回はクエリを扱う上で重要な要素であるデータ型について説明していきます。 データ型とは TDを利用する際のデータ型の種類 TDのデータ型 Hiveのデータ型 Prestoのデータ型 各データ型の関係 データ型…

文字コードについて

こんにちは、Treasure Data(TD) サポートの伊藤です。 今回はTDを利用する上で気にすることがあるであろう、文字コードについて取り上げたいと思います。 文字コードとは ASCII(シングルバイト文字) UTF-8 や S-JIS(マルチバイト文字) TDを取り扱う上での文…

Incremental Loading とは

こんにちは、Treasure Data(TD) サポートの伊藤です。 今回は差分インポートするための機能である Incremental Loading 機能について触れようと思います。 差分インポートとは Incremental Loadingを使うには 差分判定ロジックについて 辞書式ソートによる判…

Treasure Data 概要 - Export編

こんにちは、Treasure Data(TD) サポートの伊藤です。 前回のインポート編に続き、エクスポート編として記事を書こうと思います。 インポートとは異なりエクスポートは機能数が少ないので、とっつきやすく読みやすいと思います。 エクスポートとは Result Ex…

Treasure Data 概要 - Import編

こんにちは、Treasure Data(以後TD) サポートの伊藤です。 TDは様々な機能を提供しており、利用者ができることが多岐に渡る反面、施策を実現しようとしたときにどういった選択肢があるのか把握しづらい面があるかと思います。 そこで、今さらではありますが…