包含标签：spark 的文章
-
Hive｜Spark 查看表的各种信息
Hive｜Spark 查看表的各种信息 SQL Syntax - Auxiliary Statements：SQL 语法之辅助语句 SHOW COLUMNS - 查看字段信息 SHOW CREATE TABLE - 查看建表语……admin 2022-07-11
-
2022年大数据即将带来的5个重要变化
目录 1. 大数据将成为一个外交政策问题 2. 大数据优化招聘和培训 3. 实时分析维持电子商务 4. 数据中毒愈演愈烈 5 绿色数据中心的兴起 大数据在2022年达到新…… -
Spark列级血缘(字段级别血缘)开发与实现
介绍 背景 由于一直苦于尝试追踪spark的列级血缘，所以出于个人目的对spark源代码进行了修改，并且在github上独立了一个项目(Ushas)。 传统数据治理中针…… -
【回顾】IDEA 开发 SparkSQL 基础编程
文章目录 1、添加依赖 2、代码实现 2.1 构建环境 2.2 DataFrame的创建 2.3 DataSet的创建 2.4 RDD & DataFrame 2.5 RDD & DataSet 2.5 DataFr…… -
云计算相关知识点
云计算相关知识点 文章名称：云计算相关知识点 文章内容：云计算相关知识和相关技术里面涉及大数据据技术、虚拟化技术、数据中心的相关内容并行计算与集群技…… -
大数据应用技术期末复习 | Spark Scala版本 | 八个章节总共89个选择题汇总 (附带答案)
文章目录 选择题总结 (89个题) 第1章 大数据技术概述 (10个题) 第2章 Scala 语言基础 (20个题) 第3章 Spark的设计与运行原理 (10个题) 第4章 Spark环境搭建…… -
图文详解Spark的运行原理（入门必看）
前言 上期文章，介绍了 Spark 是包含多个紧密集成的组件，这些组件结合密切并且可以相互调用，这样我们可以像在平常软件项目中使用程序库一样，组合使用这…… -
spark学习8：spark SQL
1.spark SQL是什么？ spark SQL类似 hive 的功能。 hive 是把SQL转译成 查询hadoop的语法， 而spark SQL是把 SQL转译成 查询spark的语法。 并且，spark SQL…… -
使Flink SQL Kafka Source支持独立设置并行度
前言 社区在Flink 1.12版本通过FLIP-146提出了增强Flink SQL DynamicTableSource/Sink接口的动议，其中的一个主要工作就是让它们支持独立设置并行度。很多Si…… -
spark复习资料
@[TOC](SPARK试题汇总) # 选择题 Scala中定义常量使用关键字 ？ A. val B. var C. object D. final for(i<-1 to 4;j<-0 to 3 if(i==j)) print(……