首页
开源项目
数据库管理工具 DBM
数据中台系统 DataCap
AI 集成 OpenAI Java SDK
开源知识管理系统 InfoSphere
文档中心
开源周刊
开源先行者
动弹
友情链接
关于
文章归档
资源图库
Devlive 开源社区
行动起来,活在当下
累计撰写
123
篇文章
累计创建
32
个标签
累计收到
0
条评论
栏目
首页
开源项目
数据库管理工具 DBM
数据中台系统 DataCap
AI 集成 OpenAI Java SDK
开源知识管理系统 InfoSphere
文档中心
开源周刊
开源先行者
动弹
友情链接
关于
文章归档
资源图库
目 录
CONTENT
以下是
数据库
相关的文章
2024-02-28
Presto自定义函数@SqlNullable血泪史
看到标题我们会想到是由于@SqlNullable注解引发的问题,我们先看一段代码,正是这段有意思的代码,让我纠结了2个多小时,引发了Presto的问题。 @Description("user_id") @ScalarFunction("user_id") @SqlType(StandardTypes
2024-02-28
112
0
0
Presto
2024-02-01
Presto JVM性能调优GCLocker垃圾回收
Presto集群中某节点丢失上报心跳状态(服务未宕机),查看该节点日志发现以上gc清理日志. [510515.508s][warning][gc,alloc] http-worker-159944: Retried waiting for GCLocker too often allocating
2024-02-01
28
0
0
Presto
Trino
2024-01-29
Presto Join 查询导致 Internal error
问题描述 通过字面意思我们可以判断出来是系统内部出现了问题?那么该问题是怎么产生的呢? 该问题产生是一般是在使用Presto进行了Join关联查询,导致关联的两个表中的关联字段不一致导致的。 问题复原 比如我有两个数据表,分别是t1表和t2表,他们的表结构分别是: t1表结构 列名 类型 c1 bi
2024-01-29
10
0
0
Trino
Presto
2024-01-29
构建一个优秀的SQL及优化方案
必要的查询字段 由于存储的特性,选择需要的字段可加快字段的读取、减少数据量。避免采用*读取所有字段。 一般再CTE模式中这种风险不是很明显 为什么要避免使用*?它带来的风险? 它会增加查询分析SQL的成本(在数据库需要解析更多的对象、字段、权限、属性等相关内容,在复杂SQL语句,硬解析较多的情况下,
2024-01-29
8
0
0
Trino
ClickHouse
Presto
Apache Hive
2024-01-24
ClickHouse 整合 Kafka (写数据)
本文章主要讲解如何将ClickHouse中的消息写回到Kafka。 ClickHouse读取Kafka数据详见 ClickHouse 整合 Kafka(读数据) Kafka相关操作 在Kafka中创建kafka_writersTopic用于接收ClickHouse写入的数据 kafka-topics
2024-01-24
27
0
2
Apache Kafka
ClickHouse
2024-01-24
ClickHouse 整合 Kafka (读数据)
重读Kafka数据 默认从Kafka Topic的开始位置开始,并在到达消息时对其进行读取。这是正常的方式,但是有时重新读取消息很有用。例如,您可能想在修复架构中的错误或重新加载备份后重新读取消息。幸运的是,这很容易做到。我们只是在消费者组中重置偏移量。 假设我们丢失了读数表中的所有消息,并希望从K
2024-01-24
24
0
1
ClickHouse
Apache Kafka
2024-01-24
ClickHouse 整合 Kafka
要将数据从Kafka主题读取到ClickHouse表,我们需要三件事: 一个目标MergeTree表,以提供接收数据的宿主 Kafka引擎表,使主题看起来像ClickHouse表 物化视图,可将数据自动从Kafka移动到目标表 创建存储消费数据表 创建kafka_readings用于接收Kafka的
2024-01-24
13
0
0
ClickHouse
Apache Kafka
2024-01-24
ClickHouse 多集群配置
为了我们方便找到我们的配置信息,我们将CK集群做分开配置 修改集群配置 修改vim /etc/clickhouse-server/config.xml配置文件 <zookeeper> <node index="1"> <host>zk1</host> <por
2024-01-24
40
0
0
ClickHouse
2024-01-24
ClickHouse 集群配置
我们需要在每台节点中部署 ClickHouse 部署方式详见 ClickHouse安装部署 我们一般配置 ClickHouse 集群只需要修改 Zookeeper 存储和节点添加即可。 节点信息 主机 IP ck1 10.10.0.1 ck2 10.10.0.2 ck3 10.10.0.3
2024-01-24
9
0
0
ClickHouse
2024-01-24
ClickHouse 安装部署
基本配置环境 依赖 版本 ClickHouse 20.11.3.3-2 CentOS 7.x Gcc 4.8.5 下载安装ClickHouse 离线安装方式(我们使用下载到本地进行安装) wget https://repo.yandex.ru/clickhouse/rpm/stable/x86_64
2024-01-24
60
0
0
ClickHouse