hdfs的透明加密记录
2024-07-31 21:38 | 分类:数据库 | 评论:0 次 | 浏览: 45
我们知道,在hdfs中,我们的数据是以block块存储在我们的磁盘上的,那么默认情况下,它是以密文存储的,还是以明文存储的呢?如果是明文存储...
Hadoop 之文件读取
2024-07-31 21:38 | 分类:数据库 | 评论:0 次 | 浏览: 51
3.客户端对 FSDataInputStream 调用 read() 方法,DFSInputStream 从它所存储的起始几个块的 data...
Hadoop中的HDFS wordcount实验过程详细视频
2024-07-31 21:38 | 分类:数据库 | 评论:0 次 | 浏览: 49
这个实验很简单,照着ppt一步步弄就行,但是有时要注意一下自己的版本号,和自己创建的目录的名称都对应了就没问题了,弄成个视频更直观一点,方便...
HDFS的安全身份验证
2024-07-31 21:38 | 分类:数据库 | 评论:0 次 | 浏览: 48
hadoop.security.group.mapping.ldap.bind.password.file:指定了LDAP服务器管理员用户的...
HDFS文件浏览器功能OOM排查
2024-07-31 21:38 | 分类:数据库 | 评论:0 次 | 浏览: 38
涉及HDFS文件浏览器的某个功能运行一段时间后会出现OOM的情况,根据dump文件排查问题,最终在代码中定位,由于调用函数不当导致,通过新增...
【Hadoop】通过Sqoop实现从MySQL导入数据到HDFS
2024-07-31 21:37 | 分类:数据库 | 评论:0 次 | 浏览: 45
一文带你了解MySQL通过Sqoop导入数据到Hdfs的详细过程。
5、DataX(DataX简介、DataX架构原理、DataX部署、使用、同步MySQL数据到HDFS、同步HDFS数据到MySQL)
2024-07-31 21:36 | 分类:数据库 | 评论:0 次 | 浏览: 41
5、DataX(DataX简介、DataX架构原理、DataX部署、使用、同步MySQL数据到HDFS、同步HDFS数据到MySQL)
一文搞懂大数据开发,大数据开发体系详解
2024-07-31 21:34 | 分类:数据库 | 评论:0 次 | 浏览: 45
大数据,你可能就简单理解为数据量大,那是多大才算大数据呢?如果只有数据量大是不是太片面单一了,实际上如果你说是从事大数据开发, 那么起码要满...
Kerberos安全认证-连载11-HBase Kerberos安全配置及访问_kerberos hbase(2)
2024-07-31 21:34 | 分类:数据库 | 评论:0 次 | 浏览: 45
本人从事网路安全工作12年,曾在2个大厂工作过,安全服务、售后服务、售前、攻防比赛、安全讲师、销售经理等职位都做过,对这个行业了解比较全面。...
HBase基础
2024-07-31 21:34 | 分类:数据库 | 评论:0 次 | 浏览: 38
在 HBase 表中,一条数据拥有一个全局唯一的键(RowKey)和任意数量的列(Column),一列或多列组成一个列族(Column Fa...
68道Hbase高频题整理(附答案背诵版)
2024-07-31 21:34 | 分类:数据库 | 评论:0 次 | 浏览: 54
Hbase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,它利用HBase技术在HDFS上提供了类似于Bigtable的能力。换句话...
数据存储方案选择:ES、HBase、Redis、MySQL与MongoDB的应用场景分析
2024-07-31 21:33 | 分类:数据库 | 评论:0 次 | 浏览: 36
本文旨在探讨ES、HBase、Redis、MySQL和MongoDB这五种技术的核心特性和优势,通过分析它们在不同应用场景下的表现,为技术选...
一招教你搞定Hive
2024-07-31 21:33 | 分类:数据库 | 评论:0 次 | 浏览: 48
Hive 组件需要基于 Hadoop 系统进行安装。因此,在安装 Hive 组件前,需要确保 Hadoop系统能够正常运行Hive 组件的部...
explode与lateral view使用详解(spark及hive环境对比)
2024-07-31 21:32 | 分类:数据库 | 评论:0 次 | 浏览: 46
explode函数能够将array及map类型的数据炸开,实现一行变多行。
解决Error while loading conda entry point: conda-libmamba-solver (libarchive.so.19: cannot open shared
2024-07-31 21:30 | 分类:数据库 | 评论:0 次 | 浏览: 52
我在使用conda安装别的包的时候可能不小心更新了别的包,以至于后面每次使用conda都会出现这个报错。
Hive 之 UDF 运用(包会的)
2024-07-31 21:30 | 分类:数据库 | 评论:0 次 | 浏览: 36
Hive 支持两种 UDF 函数自定义操作,分别是:GenericUDF(通用UDF):用于实现那些可以处理任意数据类型的函数。它们的输入和...
大数据集群(PySpark)+MySQL+PyEcharts+Flask:购物篮数据分析与挖掘
2024-07-31 21:28 | 分类:数据库 | 评论:0 次 | 浏览: 46
Assignment-1_Data”数据集,包含与消费者购物行为相关的数据,用于市场购物篮分析(MBA)和关联规则挖掘(Associatio...
Kubernetes之安装nginx-controller作为统一网关方式
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 39
nginx-controller是什么呢?它是一个能调度nginx的一个kubernetes operator,它能监听用户创建,更新,删除...
DBeaver数据库转储、备份、迁移图文教程
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 37
连接mysql数据库的时,通常会使用dbeaver或者同系列的其他工具,在使用该工具的时候,想要进行数据库的转储、备份或者迁移是一件非常简单...
MySQL三种打开方式详细图文教程
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 41
方式一:mysql提供了一个命令行客户端点击开始菜单,找到 mysql 8.0 command line client在弹出的窗口中,输入 ...
MySQL分表和分区分表的区别小结
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 49
随着数据量的不断增长,数据库的性能和扩展性面临越来越大的挑战。为了解决这些问题,mysql提供了多种数据分割方案,其中最常见的是分表和分区分...
MySQL建表语句基础及示例详解
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 40
基本建表语句create table table_name ( column_name1 data_type(size) [colum...
MySQL的表约束的具体使用
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 39
在数据库设计中,约束(constraints)是确保数据完整性和一致性的关键工具。mysql 作为流行的关系型数据库管理系统,提供了多种约束...
MySQL文件权限存在的安全问题和解决方案
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 40
在实际生产环境中,应按照软件安全设计的「最小特权原则」设置mysql的文件权限。mysql「安装目录」的属主和属组需要设置成mysql用户;...
MySQL中ALTER LOGFILE GROUP 语句的具体使用
2024-07-29 19:31 | 分类:数据库 | 评论:0 次 | 浏览: 38
在 mysql 的 innodb 存储引擎中,alter logfile group语句用于修改重做日志组(redo log group)的...
MySQL中的ALTER EVENT语句的具体使用
2024-07-29 19:31 | 分类:数据库 | 评论:0 次 | 浏览: 39
在mysql中,event是一种特殊的数据库对象,它允许你在指定的时间间隔或特定的时间自动执行sql语句或语句集。这通常被称为“...
Zabbix配置WEB监控详细图文教程
2024-07-29 11:32 | 分类:数据库 | 评论:0 次 | 浏览: 42
zabbix web监控介绍在zabbix中配置web监控,可以监控网站的可用性和响应时间。zabbix提供了内置的web监控功能,通过配置...
Nginx代理MySQL实现通过域名连接数据库的详细教程
2024-07-29 11:32 | 分类:数据库 | 评论:0 次 | 浏览: 36
nginx 模块介绍http 模块:http模块提供了处理http请求的功能,包括反向代理、负载均衡、缓存、http代理等。例如:proxy...
Mysql覆盖索引和前缀索引的实战
2024-07-29 11:32 | 分类:数据库 | 评论:0 次 | 浏览: 37
一.sql提示sql提示,是优化数据库的一个重要手段,简单来说,就是在sql语句加入一些人为的提示来达到二.覆盖索引尽量使用覆盖索引(查询使...