OTF Talk 第34回はConfluent 清水 亮夫 さんに、「Apache Kafka と Open Table Format」についてお話をうかがいました。
リアルタイム処理とOTF/Kafkaの特徴/Kafkaと他システムとの連携/Kafka Connector/Iceberg Sink Connectorの機能と注意点
OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。
https://www.otftalk.com/
guest: Confluent ソリューションエンジニアの清水 亮夫 さん
host: @simosako 下佐粉 昭
AWSのソリューションアーキテクト。 専門はデータレイク 、データウェアハウス。
※感想は #OTFTalk でポストいただけると励みになります。
※発言は各個人のものであり、所属組織を代表するものではありません。
参考)
清水さん X https://x.com/shmza
Apache Iceberg Meetup Japan #3 https://iceberg.connpass.com/event/364492/
発表資料 https://speakerdeck.com/shmza/kafkawoli-yong-sitaiceberghenodetasutorimingu
Apache Kafka https://kafka.apache.org/
Kafka connectors https://docs.confluent.io/platform/current/connect/kafka_connectors.html
Apache Iceberg Sink Connector https://github.com/apache/iceberg/tree/main/kafka-connect
Kafka-delta-ingest https://github.com/delta-io/kafka-delta-ingest