データを取り扱う文脈で使われる「ETL」そして「ELT」に関してざっくりまとめる。

そもそもの言葉の意味

データアナリティクスなどの文脈で使われる言葉で、ETLもELTも『Extract』『Transform』『Load』の頭文字をつなぎ合わせた言葉である。その言葉それぞれが示す意味に関して以下で記述する

Excelでまとめられたデータや、tsv、RDBに格納されたデータなどを抽出する作業のことを指す。

対象のデータに関して集約する際にフォーマットを揃えたり、重複したいらないデータを加工するなどの作業。作業内容はデータの性質によってはかなり変わる。

集約したい新しい場所で外からのデータに関して読み込みをする作業のことを指します。送ることが主体ではなく出来上がったデータを読み込むことが主体なためLoadという記述。

ETLは複数のデータソースを一箇所の場所に集約する仕組みのことで

の順番で行われる。だいたいはExtractとTransformの作業は異なるツールで行われ、Loadしやすい形に変換される

ETLと同じく、複数のデータソースを一箇所の場所に集約する仕組みではあるのだが、順番が異なり

という順番で行われ、抽出したデータを集約する場所に先んじて読ませてしまい、その場所のやりかたで変換を行うというやり方。

BiqQueryなどのツールを使えば、Loadはさまざまなものに対応しているのでそこに入れてしまい、操作自体もSQLで行えるためTransformに別ツールを用いる手間などが減るので注目されている。