Flink的sink实战之四:自定义,2024年最新kafka视频分析
2024-08-01 22:45 | 分类:数据库 | 评论:0 次 | 浏览: 126
以上是字节二面的一些问题,面完之后其实挺后悔的,没有提前把各个知识点都复习到位。现在重新好好复习手上的。
【Flink SQL】Flink SQL 基础概念(一):SQL &; Table 运行环境(1)
2024-08-01 22:44 | 分类:数据库 | 评论:0 次 | 浏览: 110
/ 1. 创建一个数据源(输入)表,这里的数据源是 flink 自带的一个随机 mock 数据的数据源。.inStreamingMode()...
Flink SQL 实时读取 kafka 数据写入 Clickhouse —— 日志处理(三)
2024-08-01 22:44 | 分类:数据库 | 评论:0 次 | 浏览: 118
本文总结了如何使用使用 Clickhouse 保存日志数据,以及如何通过 Flink SQL 将我们的日志实时从 kafka 同步至 cli...
Flink借助Kafka实现端到端精准一次_flink 如何保障数据一致性
2024-08-01 22:44 | 分类:数据库 | 评论:0 次 | 浏览: 197
那么在检查点保存的时候,系统故障,保存检查点失败,那么恢复检查点的时候,恢复的是上次成功保存检查点的数据偏移量,如果不对新数据进行保护,可能...
FlinkSql概述
2024-08-01 22:43 | 分类:数据库 | 评论:0 次 | 浏览: 116
Table API和SQL是最上层的API,在Flink中这两种API被集成在一起,SQL执行的对象也是Flink中的表(Table),所以...
博客摘录「 数据仓库 - hive - 日期维表,日,周,月份,年份,节假日,工作日」2024年4月15日
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 115
nt_year}','yyyy'))),',')) tf AS pos,val ) t2_date ) t1_date) ,v_specia...
智慧人社解决方案-最新全套文件
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 118
智慧人社解决方案。面向城镇职工、城乡居民、机关事业单位职工等群体,实现参保信息管理、基金征缴管理、待遇支付管理、关系转接管理等业务经办服务,...
【手写数据库】从零开始手写数据库内核,行列混合存储模型,学习大纲成型了
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 135
手写数据库toadb 保姆级教程来了。
银行数据仓库体系实践(1)--银行数据仓库简介
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 113
银行作为我国金融体系中的支柱行业,银行业务涉及种类众多,业务流程复杂,且像工行、建行等国有银行服务亿级的客户,每天交易量和BAT等互联网公司...
数据仓库——雪花模式以及层次递归
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 133
通常在维度中确定多重层次结构,每一个层次结构包含维度的所有属性,但将属性组织起来的方式不同。查询事实时,通过在层级的下一个级别中添加一个维度...
关于kettle连接 亚马逊redshift数据库的方法
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 107
关于kettle连接 亚马逊redshift数据库的方法
最新数据仓库和数据挖掘基础知识点_数据仓库与数据挖掘(2),7年老大数据开发一次坑爹的面试经历
2024-08-01 22:42 | 分类:数据库 | 评论:0 次 | 浏览: 111
(3)完全刷新:这种类型的数据装载用于周期性重写数据仓库。
一篇文章搞懂数据仓库:三种事实表(设计原则,设计方法、对比)
2024-08-01 22:41 | 分类:数据库 | 评论:0 次 | 浏览: 117
粒度是一个订单一行数据,创建订单时间,付款时间,发货时间,收货时间,分别作为一个字段,便于计算不同业务过程的时间间隔。事实表作为数据仓库维度...
4 万字全面掌握数据库、数据仓库、数据集市、数据湖、数据中台
2024-08-01 22:41 | 分类:数据库 | 评论:0 次 | 浏览: 120
本文对商业智能(BI)、数据仓库、数据湖、数据中台等名词术语及内涵进行系统的解析,便于读者对数据平台相关的概念有全面的认识。
RabbitMQ和RocketMQ区别 | RabbitMQ和RocketMQ优缺点解析 | 消息队列中间件对比:RabbitMQ vs RocketMQ - 选择哪个适合您的业务需求?
2024-08-01 22:37 | 分类:数据库 | 评论:0 次 | 浏览: 111
消息队列中间件对比:RabbitMQ vs. RocketMQ - 选择哪个适合您的业务需求?RabbitMQ和RocketMQ作为流行的消...
大数据分析设计-基于Hadoop运动项目推荐系统
2024-08-01 22:35 | 分类:数据库 | 评论:0 次 | 浏览: 116
系统通过统计分析用户运动信息,获取大众用户的运动习惯,设计人们感兴趣的运动模式,以提高人们的运动积极性。以前通过传统的项目查询以及体验反馈的...
Hadoop3.x源码解析
2024-08-01 22:34 | 分类:数据库 | 评论:0 次 | 浏览: 109
文章目录一、RPC通信原理解析1、概要2、代码demo二、NameNode启动源码解析1、概述2、启动9870端口服务3、加载镜像文件和编辑...
使用Hadoop分析气象数据完整版(附带完整代码)_hadoop气象数据分析(1)
2024-08-01 22:34 | 分类:数据库 | 评论:0 次 | 浏览: 122
计算出每日温度的最大值、最小值和平均值,并放入对象中。
Mac M1安装配置Hadoop+Flink SQL环境
2024-08-01 22:34 | 分类:数据库 | 评论:0 次 | 浏览: 126
Flink 1.18.1+ Hadoop 3.4.0
Hadoop 集群间同步数据(高可用)-相同版本
2024-08-01 22:27 | 分类:数据库 | 评论:0 次 | 浏览: 110
Hadoop 集群间同步数据(高可用)-相同版本,源集群和目标集群的 NameNode 都是高可用的
HDFS 分布式存储 spark storm HBase
2024-08-01 22:27 | 分类:数据库 | 评论:0 次 | 浏览: 109
基于Hadoop 数据保存到HDFS数据仓库工具结构化的数据 映射为一张数据库表01,张三,8902,李四,9103,赵武,92HQL查询功...
Spark与Hadoop相比的优缺点
2024-08-01 22:25 | 分类:数据库 | 评论:0 次 | 浏览: 121
spark 中文官网:http://spark.apachecn.orgSpark 是一种快速、通用、可扩展的大数据分析引擎,2009 年诞...
【HDFS】客户端读某个块时,如何对块的各个副本进行网络距离排序?
2024-08-01 22:24 | 分类:数据库 | 评论:0 次 | 浏览: 112
【HDFS】客户端读某个块时,如何对块的各个副本进行网络距离排序?
HBase 基础结构
2024-08-01 22:22 | 分类:数据库 | 评论:0 次 | 浏览: 110
HBase 是一个分布式[集群]、可扩展[动态上下线]、支持海量存储的 NoSQL 数据库。相当于 BigTable,负责海量数据的存储。如...
深入浅出:MySQL与HBase的核心差异及适用场景解析
2024-08-01 22:21 | 分类:数据库 | 评论:0 次 | 浏览: 106
MySQL和HBase都是当前广泛应用的数据库系统,但它们的设计哲学、应用场景和性能特点有很大的差异。MySQL是一个关系型数据库管理系统(...