【Spark Summit East 2017】 使用Kafka Connect和Spark Streaming构建实时数据管道

本讲义出自<b>ewen cheslack postava</b>在spark summit east 2017上的演讲，主要介绍了面对使用spark streaming构建大规模实时数据管道的挑战，kafka项目最近推出了新的工具—— kafka connect，该工具将帮助简化从kafka导入和导出数据，ewen cheslack postava分享了如何使用kafka connect和spark streaming构建实时数据管道。