使用 SMACK 開發小型 Hybrid Database 系統時踩過的坑

摘要：

本次題目旨在分享公司初次採用 SMACK 架構中的 Kafka, Spark 與 Cassandra，開發混合式資料庫 (RDB 與 NoSQL) 系統時，在初期架構規劃、實作開發、部署與調校各個元件時所遭遇的各種問題與處理方式。其中 Spark 應用以 Scala 實作，而 Kafka 部分則是 Java。

講者簡介：

資料工程領域工作者，醉心於分散式架構上的資料流處理、儲存與調校。
接觸 Spark 後轉為 Scala 與 FP 粉，目前正在這方面努力學習。譯有《Spark學習手冊》與《Cassandra技術手冊》(歐萊禮出版社)。

• ← 104 Job match recommendation using deep learning
• Data format transform for local cluster to AWS S3 and EMR →