Spark临时表tempView的注册/使用/注销/注意事项(推荐)

createTempView运作原理

先说一个众人皆知的时表知识:Spark中的算子包含transformation算子和action算子,transformation是册使根据原有RDD创建一个新的RDD,而action则把RDD操作后的用注意事结果返回给driver。源码下载Spark对transformation的销注项推抽象可以大大提高性能,这是时表因为在Spark中,所有transformation操作都是册使lazy模式,即Spark不会立即计算结果,云服务器用注意事而只是销注项推简单地记住所有对数据集的转换操作逻辑。这些转换只有遇到action操作的时表时候才会开始计算。这样的册使设计使得Spark更加高效。香港云服务器

低效做法

?用注意事

Spark临时表tempView的注册/使用/注销/注意事项(推荐)

滇ICP备2023000592号-31