spark
-
如何进行SparkContext核心源码的解析「spark:核心思想与源码分析」
SparkContext是Apache Spark的核心组件，它负责连接到一个或多个集群节点，并提供了与这些节点进行通信的入口，本文将对SparkContext的核心源码进行解析，帮助大家更好地理解SparkContext的工作原理和实现方法。我们需要了解Spark的基本架构，Spark是一个基于内存计算的分布式计算系统，它将数据划分……
-
spark-sql -d
Spark SQL是Apache Spark的一个模块，它提供了一个编程接口，允许用户使用结构化的数据处理语言(如SQL)来处理大规模数据集，Spark SQL的主要目标是提供高性能、易用性和可扩展性的数据处理能力，本文将通过一个实际的代码示例，详细介绍Spark SQL的基本用法和技术特点。我们需要创建一个SparkSession对……
