ETL
E
xtract,
T
ransform,
L
oad
データの抽出・変換・格納のためのツール
「MySQLをうけて、BigQueryに流す」みたいなことをするためのツール
e.g. via
https://speakerdeck.com/yuzutas0/20200715?slide=71
バッチ
Embulk
,
AWS Glue
ストリーミング
Amazon Kinesis
,
Cloud Pub/Sub
Fluentd
,
Kafka
,
Logstash
,
Apache Storm
両対応
Apache Spark