2019-01-17 夜深了,,,大家经常抱怨网上大多的技术分享是关于Spark DStreams的,对建立在SQL优化器上的新一代Spark Streaming引擎Structured Streaming的资料比较少。。。除了Apache Spark官方资料,这次给大家推荐发表在最顶级数据库会议SIGMOD 2018的论文https://www.slidestalk.com/s/sigmod_structured_streaming。
顺便分享一些社区写的blog
- 法国巴黎的小伙,https://www.waitingforcode.com/apache-spark-structured-streaming
- 东欧的一个老先生,https://jaceklaskowski.gitbooks.io/spark-structured-streaming/
- 当然还是主推砖厂自己的guide:https://docs.databricks.com/spark/latest/structured-streaming/index.html