Trino概要とOTF対応のコネクタ (#11,12)

OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。

#11と#12ではStarburst の蛯原裕弥さんをゲストに、Trinoの成り立ちやフェデレーション機能、TrinoコネクタのIceberg, Delta lake対応についてお話をうかがいました。

guest： @ebyhr (蛯原裕弥)

Starburst Engineer / Trino, Apache Polaris committer

host: @simosako (下佐粉昭)

AWSのソリューションアーキテクト。専門はデータレイク、データウェアハウス。

※感想は #OTFTalk でポストいただけると励みになります。

※発言は各個人のものであり、所属組織を代表するものではありません。

第11回：Trinoの成り立ちとコネクタの役割

OTF Talk 第11回は、Starburst の蛯原裕弥さんに、OTFのデータをクエリする際によく利用されている分散SQLエンジンであるPresto/Trinoの成り立ちや、Trinoのフェデレーション機能と各種コネクタについてお話をうかがいました。

PrestoとTrinoの成り立ち/Trinoの特徴/フェデレーション機能とコネクタ/実装はどこが担うのか

※感想は #OTFTalk でポストいただけると励みになります。

※発言は各個人のものであり、所属組織を代表するものではありません。

OTF Talk 第12回は、Starburst の蛯原裕弥さんに、OTF(Iceberg, Delta lake)をサポートするTrinoのコネクタについて、概要やその実装方法についてお話をうかがいました。

Trinoコネクタの役割/Icebergコネクタ/Trino+コネクタの特徴/Delta lakeコネクタ/Delta kernelを使っていない理由

Starburst

Apache Polaris

Presto

Trino

Write-Audit-Publish (WAP)解説 (Tabular)

蛯原さんのWrite-Audit-Publish (WAP)の実装のための活動(pull request)

誤った統計情報を読み取った場合の挙動についてのpull request

Delta kernel