包含标签：hadoop 的文章
-
Hadoop运行模式及目录结构
文章目录 Hadoop运行模式 本地模式 伪分布式模式 完全分布式模式 Hadoop目录结构 配置文件说明 默认配置文件： 自定义配置文件： Hadoop运……admin 2023-12-01
-
2023.11.22 数据仓库2-维度建模
目录 1.数仓建设方案 2.数仓结构图,项目架构图 2.1项目架构图 2.2数仓结构图 3.建模设计 4.维度建模 什么是事实表: 什么是维度表: 数据发展模式y以及对…… -
ubuntu操作系统中docker下Hadoop分布式前置环境配置实验
版本： centos7 hadoop 3.1.3 java JDK:1.8 集群规划： master slave1 slave2 HDFS NameNode DataNode DataNode SecondryNameNode DataNode …… -
云计算与大数据入门实验四 —— MapReduce 初级编程实践
云计算与大数据入门实验四 —— MapReduce 初级编程实践 实验目的 通过实验掌握基本的 MapReduce 编程方法 掌握用 MapReduce 解决一些常见的数据处理问题…… -
2023.11-9 hive数据仓库,概念,架构,元数据管理模式一.HDFS、HBase、Hive的区别
目录 0.数据仓库和数据库 数据仓库和数据库的区别 数据仓库基础三层架构 一.HDFS、HBase、Hive的区别 二.大数据相关软件 三. Hive 的优缺点 1）优点 2）缺…… -
数据湖架构Hudi（五）Hudi集成Flink案例详解
五、Hudi集成Flink案例详解 5.1 hudi集成flink flink的下载地址： https://archive.apache.org/dist/flink/ Hudi Supported Flink version 0.12.x …… -
ubuntu22.04下hadoop3.3.6+hbase2.5.6+phoenix5.1.3开发环境搭建
一、涉及软件包资源清单 1、java 这里使用的是openjdk 2、hadoop-3.3.6.tar.gz 3、hbase-2.5.6-hadoop3-bin.tar.gz 4、pho…… -
hadoop 如何关闭集群 hadoop使用脚本关闭集群 hadoop(八)
1. hadoop22, hadoop23, hadoop24三台机器 2. namenode 所在hadoop22关闭 hdfs: # 找到/etc/hadoop位置 cd /opt/module/hadoop-3.3.4/etc/hadoop # 找到shell…… -
流行架构对比
Storm与Spark：谁才是我们的实时处理利器 Storm:实时处理领域的Hadoop 作为一套专门用于事件流处理的分布式计算框架，Storm的诞生可以追溯到当初由BackType…… -
hive 架构及 metastore 功能简单介绍
这两天在调研用 java 怎么能通过 hive metastore 将 hive 表中的数据读出来（不能用 hive2），最好是能直接支持 sql 查询。各种查跟尝试，最终确定这条路走……