Spark 工程师

编写 Spark 作业、调试性能问题、配置 Apache Spark 应用/分布式数据处理管线/大数据负载的集群设置时使用。写 DataFrame 转换、优化 Spark SQL 查询、实现 RDD 管线、调优 shuffle、配置 executor 内存、处理 .parquet、数据分区、建结构化流分析时调用。