包含标签:big data 的文章
-
13张图让你百分百掌握kafka副本同步限流机制 |文末任性送35本技术书
?《Kafka运维管控平台》? ✏️更强大的管控能力✏️ ?更高效的问题定位能力? ?更便捷的集群运维能力? ?更专业的资源治理? ?更友好的运维生…… -
大数据的中流砥柱——HDFS hdfs及其特点 hdfs的重要功能 hdfs机制
没有hdfs,大数据就是空话 ——me (开个玩笑哈哈哈) 1、hdfs入门、hdfs介绍 HDFS(Hadoop Distributed File System),也叫分布式文件系统。是一个Apache So…… -
Flink 的侧输出 和一个流拆分成多个流
1. Flink 侧输出流 官网 :https://nightlies.apache.org/flink/flink-docs-release-1.14/docs/dev/datastream/side_output/ 1.1 理解 侧输出流就是将问题…… -
什么是Kafka
什么是Kafka 概念 网址: Kafka 官网 描述: Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。 Kafka是一种高吞吐量的分布…… -
zookeeper 浅谈zookeeper及其特点 重要机制 zookeepe应用汇场景 选举机制 监听原理 zookeeper客户端操作命令 zookeeper配置参数
1、Zookeeper及其他大数据组件简介 HDFS:是解决存的问题 HBase:解决大表的问题,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统 Hive:是包装Map…… -
什么是spark? spark与hadoop的对比
目录 一. 什么是Spark 二. Hadoop与Spark历史 三. Hadoop与Spark框架对比 四. Spark内置模块 五. Spark特点 六. Spark运行模式 七. Spark安装地址 一. 什么…… -
一周信创舆情观察(11.15~11.21)
一、一周舆情要点 11月16日,工信部印发《“十四五”信息通信行业发展规划》(以下简称《规划》),提出到2025年,信息通信行业整体规模进一步壮大,发展质量显…… -
sqoop导入和导出数据操作(保姆级教程)
导入: 一、将mysql数据库中的表数据导入到HDFS 表数据和格式如下: 1、首先先在hdfs中创建目录,用于导入后存放数据 hdfs dfs -mkdir /sqooptest hdfs dfs…… -
SparkStreaming接收Flume数据方式一:Push模式
SparkStreaming接收Flume数据方式一:Push模式 一、前置工作 二、Flume之Push模式 三、Flume配置 四、编写程序 五、运行验证 一、前置工作 需安装…… -