Hive On Spark 报错:Failed to get a spark session: org.apache.hadoop.hive.ql.metadata.HiveException
2024-07-31 21:30 | 分类:数据库 | 评论:0 次 | 浏览: 20
脚本中含有:数据装载进hive表的sql语句,在执行脚本的时候发生报错。
spark on k8s两种方式的原理与对比
2024-07-31 21:28 | 分类:数据库 | 评论:0 次 | 浏览: 23
Spark on k8s Operator 更适合大规模、需要自动化和集中管理的场景。它利用 Kubernetes 的原生功能,实现自动化管...
深入解析 Spark SQL 中的 REPARTITION 操作
2024-07-31 21:27 | 分类:数据库 | 评论:0 次 | 浏览: 27
深入解析 Spark SQL 中的 REPARTITION 操作
如何使用谷歌巴德(Google Bard PaLM2)设计一个自助分析的报告平台 API?
2024-07-31 20:56 | 分类:数据库 | 评论:0 次 | 浏览: 29
此代码定义一个简单的 HTTP 终结点,该终结点基于请求参数中传递的数据创建仪表板。仪表板标题在查询参数中传递,仪表板小组件在查询参数中传递...
中文自然语言处理学习笔记(二)——语料库的安装与使用
2024-07-31 19:57 | 分类:数据库 | 评论:0 次 | 浏览: 25
这章笔记一步步介绍语料库概念与使用,安装NLTK,实现对线上语料库内容的获取与分析,最后实现构建一个斗罗大陆小说的本地语料库。
Linux如何使用docker方式搭建SQL Server
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 31
拉取官方镜像docker pull mcr.microsoft.com/mssql/server:2019-latest生成容器并运行doc...
SQL Server数据库备份与还原完整操作案例
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 21
一、sql server数据库的备份1.创建备份设备1.1. 服务器对象=》备份设备,右键新建备份设备。1.2. 设备名称输入”...
Sql Server查询卡顿的排查方法
2024-07-31 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 29
前言本篇为理论知识的分析以及对症下药,前阵子发生过bug,后通过迁移服务器以及数据库最终才解决问题,但是细想当时可能是因为碎片或者缓存的概率...
DevOps 实践:5 大原则以实现持续交付成功
2024-07-28 21:15 | 分类:数据库 | 评论:0 次 | 浏览: 27
1.背景介绍在当今的快速发展和竞争激烈的环境中,软件开发和部署的速度成为了企业竞争力的重要组成部分。为了满足这一需求,DevOps 理念诞生...
DevOps实战笔记--3(Jenkins流水线任务+K8S介绍)
2024-07-28 21:15 | 分类:数据库 | 评论:0 次 | 浏览: 23
当我们采用自由风格构建项目时,项目中的每个步骤都需要进行单独配置,而且构建时每一步之间没有明确的区分,若出现问题,需要单独查找控制台,定位起...
Xray如何在Ubuntu上安装
2024-07-28 21:15 | 分类:数据库 | 评论:0 次 | 浏览: 29
在安装Xray之前,我们需要一个Artifactory来连接Xray,还需要一个外部数据库。所以我带大家先安装并配置Artifactory,...
QT5.8带中文QString转换为gbk,ASCII编码的char数组
2024-07-28 20:37 | 分类:数据库 | 评论:0 次 | 浏览: 23
开发的一个项目中,用到从SQLITE3数据库取出的数据,以gdk或ASCII格式发送给下游设备。
2024.4.7力扣每日一题——王位继承顺序
2024-07-28 20:25 | 分类:数据库 | 评论:0 次 | 浏览: 28
2024.4.7 力扣每日一题 王位继承顺序 哈希表 设计 多叉树的前序遍历
详解如何在Ubuntu 18.04上安装和使用PostgreSQL
2024-07-28 19:32 | 分类:数据库 | 评论:0 次 | 浏览: 22
简介关系数据库管理系统是许多网站和应用程序的关键组件。它们提供了一种结构化的方式来存储、组织和访问信息。postgresql,或者简称为 p...
Flink实现准确和高效流处理的关键问题
2024-07-28 19:09 | 分类:数据库 | 评论:0 次 | 浏览: 24
同时到达Flink的事件时间为900ms和1000ms,允许的乱序时间为100ms,如果不减去1ms,那么900ms的事件就会被任务是迟到数...
Apache-Flink未授权访问高危漏洞修复
2024-07-28 19:09 | 分类:数据库 | 评论:0 次 | 浏览: 31
由于flink没有鉴权的设置,使用使用 htpasswd 工具+服务器系统防火墙设置,才能禁用默认对外访问的8081端口,使用用户名+密码实...
【极数系列】Flink集成DataSource读取文件数据(08)
2024-07-28 19:09 | 分类:数据库 | 评论:0 次 | 浏览: 19
旨在帮助读者开发Flink程序集成DataSource文件数据时更快捷方便,提供教程以及相关源码实战案例提高开发效率
【Flink】Flink提交流程
2024-07-28 19:09 | 分类:数据库 | 评论:0 次 | 浏览: 25
我们通常在学习的时候需要掌握大数据组件的原理以便更好的掌握这个大数据组件,Flink实际生产开发过程中最常见的就是提交到yarn上进行调度,...
流计算之Flink
2024-07-28 19:09 | 分类:数据库 | 评论:0 次 | 浏览: 32
TaskManager(也称为 worker)执行作业流的 task,并且缓存和交换数据流。TaskManager 中 task slot ...
【Flink】Flink各版本及新特性
2024-07-28 19:09 | 分类:数据库 | 评论:0 次 | 浏览: 28
在流式 SQL 查询中,一个最经常使用的是定义时间窗口。Flink 1.13 中引入了一种新的定义窗口的方式:通过 Table-valued...
【flink番外篇】9、Flink Table API 支持的操作示例(2)- 通过Table API 和 SQL 创建视图
2024-07-28 19:08 | 分类:数据库 | 评论:0 次 | 浏览: 27
一、Flink 专栏Flink 专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink 部署系列本部分介绍Flink的部署、配置相...
Flink 内容分享(七):Flink 读写 HBase 总结
2024-07-28 19:08 | 分类:数据库 | 评论:0 次 | 浏览: 23
总结 Flink 读写 HBase本文总结了Flink SQL 读写 HBase 的参数配置,解决了在kerberos环境下因 hudi 包...
大数据开发之离线数仓项目(4-1电商数据仓库系统)(可面试使用)
2024-07-28 19:05 | 分类:数据库 | 评论:0 次 | 浏览: 27
事实表作为数据仓库维度建模的核心,紧紧围绕着业务过程来设计。其包含与该业务过程有关的维度引用(维度表外键)以及该业务过程的度量(通常是可累加...
Spark与ApacheHive数据仓库
2024-07-28 19:05 | 分类:数据库 | 评论:0 次 | 浏览: 26
1.背景介绍1. 背景介绍Apache Spark和Apache Hive都是大规模数据处理的开源工具,它们在数据仓库领域具有广泛的应用。S...
HBase-15-Phoenix
2024-07-28 18:45 | 分类:数据库 | 评论:0 次 | 浏览: 23
图中展示了,通过phoenix和hive对基于HDFS和HBase的数据记性查询的时候,随着数据量的增长,查询时间的变化曲线。◆使用本地的H...