包含标签：etl 的文章
-
kettle调用接口数据
总流程讲解 流程讲解： 基础流程是1.首先根据调用的接口所需要的参数或其他配置信息进行信息生成（有些简单的接口无需这一步来生成信息，可以直接在接口调……admin 2023-12-04
-
分布式ETL工具Sqoop实践
Mysql数据准备 1、在node02节点登录Mysql。 mysql -uroot -proot 2、新建数据库testdb。 create database testdb; 3、新建数据表ts。 use testdb; create …… -
OLTP vs OLAP 区别和联系
OLTP 和 OLAP 这两个概念在十来年前、十几年前商业智能BI这个词还不是那么普及的时候，还经常放在一起做比较，现在已经很少再单独拿出来做对比了，但也总还是…… -
大数据ETL工具对比（Sqoop, DataX, Kettle）
前言 在实习过程中，遇到了数据库迁移项目，对于数据仓库，大数据集成类应用，通常会采用ETL工具辅助完成，公司和客户使用的比较多的是Sqoop, DataX和Kettle…… -
DataX 3.0 在Windows下基于MySQL做数据迁移示例
在 Windows 安装 Datax： Datax 官网：https://github.com/alibaba/DataX 环境要求： 1：JDK（1.8以上，推荐1.8，并配置好环境变量） 2：Python（网上推荐Pyt…… -
http://t.csdn.cn/Kkx8I使用" alt="python笔记17_实例演练_二手车折旧分析p2">
python笔记17_实例演练_二手车折旧分析p2
…… 书接上文 4.车辆等级维度 探查车龄为5年的车辆，折旧价值与车辆等级的关系。 # 筛选出车龄为5的数据创建新表 data_age5 = data[data['age'] == 5] data_ag…… -
AWS 设计高可用程序架构——Glue(ETL)部署与开发
依赖：本文需要了解AWS 架构设计基础知识 AWS Glue 是一项完全托管的 ETL（提取、转换和加载）服务，使您能够轻松而经济高效地对数据进行分类、清理和扩充，…… -
数据仓库面试题汇总
一、分析 1．什么是逻辑数据映射？它对 ETL 项目组的作用是什么？ 逻辑数据映射（Logical Data Map）用来描述源系统的数据定义、目标数据仓库的模型以及 将源…… -
实时即未来，车联网项目之原始终端数据实时ETL【二】
文章目录 Flink 将报文解析后的数据推送到 kafka 中 实时ETL开发 原始数据的实时ETL设置 开发的流程 开发的类名 —— KafkaSourceDataTask 设置 checkpoi…… -
效率低？响应慢？报表工具痛点及其解决方案
文章目录 一、疼点在哪里？ 没完没了的报表加剧头疼 二、怎么办 集算器做数据准备写的快算的快 完全工具化应对没完没了 直接用润乾报表更便利 报……