包含标签:hadoop 的文章
-
阿里内部爆火的Java基础合集,了解之后就像吃饭喝水一样简单?
大数据必备技能 根据方向,我总结了一下需要的技能,供你参考,如下: 最基本的是JAVA核心API有关内容,当然有JAVA开发经验的最容易入门,比如从事过JAVAWEB…… -
Hadoop学习5-4:Hadoop3.x新特性——纠删码(擦除编码)
1 基本概念 2 纠删码操作 2.1 纠删码策略查看 2.2 纠删码策略设置 2.3 纠删码策略测试 1 基本概念 HDFS为擦除编码(EC)提供了支持,以更有…… -
-
flink on k8s native 再次实践
基于flink 1.13.2版本做的实践 本次主要实践flink on k8s native 的两种方式, 分别是sesion 和 application方式 第一步: k8s环境准备 1, 创建一个namespace…… -
集群运维:All datanodes DatanodeInfoWithStorage[10.21.131.179:50010,DS-6fca3fba-7b13-4855-b483-342df8432e
规划出一个集群日常维护系列,分享各种奇葩案例,集群运维事故,欢迎大家交流投稿。集群的运维故障排查是一个任重而道远的事情。 1.集群故障现象 Er…… -
【hadoop】Hive搭建
1、下载安装包:apache-hive-3.1.1-bin.tar.gz 上传至linux系统/usr/local/soft/路径 2、解压软件 cd /usr/local/soft/ tar -zxvf apache-hive-3.1.1-bin.ta…… -
SparkCore之Partitiion
SparkCore之Partitiion 文章目录 SparkCore之Partitiion 1.概念 2.Spark Core的数据分区方式 2.1.HashPartitioner 2.2.RangePartitioner 1.概…… -
安装单机模式的zookeeper
链接:https://pan.baidu.com/s/1ye_7tOiDQo_Eh2sdJq7FDw 提取码:onpk 上传zookeeper到/home/hadoop 把Zookeeper文件解压到/usr/local sudo tar -xvf apa…… -
MapReduce
MapReduce详解 MapReduce设计理念 map–>映射(key value) reduce–>归纳 mapreduce必须构建在hdfs之上一种大数据离线计算框架 在线:实时数据处理 …… -
大数据运维—Linux安装hadoop Hadoop HA集群部署
1.Hadoop下载好之后解压到相应目录: 为了方便管理,我们使用mv把名称更改为hadoop [root@master ~]# tar -zxvf hadoop-2.7.1.tar.gz -C /usr/local/……