包含标签:hive 的文章
-
大数据项目中数据倾斜
一、数据倾斜包含:hadoop数据倾斜,hive中数据倾斜、spark数据倾斜 【hadoop中的数据倾斜表现】 1、有一个多几个 Reduce 卡住,卡在 99.99%,一直不能结束…… -
一文读懂数据仓库~~~
文章目录 1、简介 1.1、背景 1.2、概念 1.3、传统数据库与大数据仓库 2、数据仓库、数据库、数据集市 2.1、OLTP、OLAP 2.2、数据仓库、数据库 2.3…… -
快手一面:讲一讲 Hadoop、Hive、Spark 之间的关系?
5G 时代,运营商网络不断提速,成本越来越低,流量越来越便宜。 给 互联网、物联网、互联网+ 各个行业的高速发展创造了非常好的有利条件,同时也产生了海量数…… -
Hive|Spark 查看表的各种信息
Hive|Spark 查看表的各种信息 SQL Syntax - Auxiliary Statements:SQL 语法之辅助语句 SHOW COLUMNS - 查看字段信息 SHOW CREATE TABLE - 查看建表语…… -
hive metastore配置kerberos认证
hive从3.0.0开始提供hive metastore单独服务作为像presto、flink、spark等组件的元数据中心。但是默认情况下hive metastore在启动之后是不需要进行认证就可以…… -
hive:explode和lateral view函数实现行转列
需求:假设某超市的订单表order如下,现想统计用户经常购买的Top100商品。 思路:为了便于统计Top100商品,需要从订单表order的info字段提取商品字段goods,…… -
centos7编译安装hive
一、安装数据库 1、解压安装包 tar zxf mysql-5.6.39-linux-glibc2.12-x86_64.tar.gz -C /data/ 2、修改文件目录名称 mv /data/mysql-5.6.39-linux-glibc…… -
hive使用报错整理
报错 Error: Could not open client transport with JDBC Uri: jdbc:hive2://node1:10000: Failed to open new session: java.lang.RuntimeException: org.a…… -
大数据高级开发工程师——工作流调度器Azkaban(1)
文章目录 工作流调度器Azkaban Azkaban介绍 为什么需要工作流调度系统 工作流调度实现方式 Azkaban简介 Azkaban架构 Azkaban基本架构 Azkaban架构…… -
大数据高级开发工程师——大数据相关工具之一 Sqoop
文章目录 大数据相关工具 Sqoop ETL工具 Sqoop简介 Sqoop1与Sqoop2架构对比 Sqoop安装部署 Sqoop的数据导入 1. 列出所有数据库 2. 准备表数据 3. 导……