搜索内容

包含标签:hadoop 的文章
  • 大数据是干什么的?
    云计算

    大数据是干什么的?

    大数据是指在一定时间内,常规软件工具无法捕捉、管理和处理的数据集合。它是一种海量、高增长、多元化的信息资产,需要一种新的处理模式,以具备更强的决策……
    admin 2023-07-22
  • Hive概述
    物联网

    Hive概述

    Hive 一 Hive基本概念 1 Hive简介 学习目标 - 了解什么是Hive - 了解为什么使用Hive ####1.1 什么是 Hive Hive 由 Facebook 实现并开源,是基于 Hadoop……
    admin 2023-07-21
  • [sqoop]导入数据
    5G

    [sqoop]导入数据

    一、覆盖导入 例如维度表,每次导入的数据需要覆盖上次导入的数据。 hive-overwrite参数:实现覆盖导入 hive-import参数:表示向hive表导入 hive-table参数:……
    admin 2023-07-21
  • HDFS与MapResource笔记
    5G

    HDFS与MapResource笔记

    客户端向NN请求上传文件 NN回应可以上传 请求上传块,返回DN 所以后面就比较慢 找最近的服务器进行 64K发到1节点,1节点立刻发给2节点,同时1节点自动开始落盘,……
    admin 2023-07-21
  • hadoop分布式系统复习题 选择题
    5G

    hadoop分布式系统复习题 选择题

    1、以下哪一项不属于 Hadoop 可以运行的模式? 互联模式 2、下面哪个程序负责 HDFS 数据存储? Datanode 3、HDFS 中的 block 默认保存__3 _份。 4、配置Hadoo……
    admin 2023-07-20
  • hadoop组成及其架构
    架构

    hadoop组成及其架构

    1.Hadoop组成 组成Hadoop的最核心框架有三个MapReduce、YARN和Hdfs,分别是分布式计算框架、资源调度框架和分布式文件系统。 1.1 HDFS架构概述 Hadoop Dist……
    admin 2023-07-18
  • HBase 架构
    架构

    HBase 架构

    文章目录 一,HBase 架构简介 hbase架构拓扑图 Client Zookeeper Master RegionServer HLog(WAL log) Region Memstore 与 storefile HBase和HDFS的对比……
    admin 2023-07-09
  • " alt="大数据处理架构Hadoop">
    架构

    大数据处理架构Hadoop

    Hadoop两大核心:HDFS和MapReduce Hadoop的特性: 1.高可靠性:多台机器构成集群,部分机器故障,剩余机器可以继续对外提供服务 2.高效率:成百上千台机器一……
    admin 2023-07-06
  • 一文带你快速初步了解云计算与大数据
    云计算

    一文带你快速初步了解云计算与大数据

    目录 🔍一、云计算基础 1、云计算的概念、特点、关键技术 2、云计算的分类 3、云计算的部署模式 4、云计算的服务模式:IaaS、PaaS、SaaS分别是什么,具体含义……
    admin 2023-07-03
  • Hadoop基础——HDFS知识点梳理
    5G

    Hadoop基础——HDFS知识点梳理

    HDFS基础知识 1. 介绍一下HDFS组成架构? 组成部分: HDFS Client, NameNode, DataNode Secondary NameNode( HA模式下是 StandBy NameNode) Client: 客……
    admin 2023-07-03