今天阳光很暖
Cmd Markdown 公式指导手册 Cmd Markdown 公式指导手册
1.clickhouse 版本多维分析 springboot 接口编写 2.clickhouse 对应 MySQL 表映射 3.flume clickhouse sink 插件编写 原文地址: https://www.zybuluo.c
2022-01-15
ClickHouse 数据备份与恢复 ClickHouse 数据备份与恢复
官网:https://clickhouse.tech/docs/en/operations/backup/ 1. 手动备份与恢复数据 ClickHouse 允许使用 ALTER TABLE … FREEZE PARTITION … 查询以创
2022-01-03
Hive 数据倾斜问题定位以及排查 Hive 数据倾斜问题定位以及排查
1. 背景介绍多数介绍数据倾斜的文章都是以大篇幅的理论为主,并没有给出具体的数据倾斜案例。当工作中遇到了倾斜问题,这些理论很难直接应用,导致我们面对倾斜时还是不知所措。 今天我们不扯大篇理论,直接以例子来实践,排查是否出现了数据倾斜,具体是
2021-12-18
ClickHouse 使用中遇见的异常 ClickHouse 使用中遇见的异常
1. Array(String) cannot be inside Nullable typeDB::Exception: Nested type Array(String) cannot be inside Nullable type
2021-12-07
关于 HDFS 中小文件的处理方式 关于 HDFS 中小文件的处理方式
1. 介绍在Hadoop应用过程中,处理小文件问题是一项常见的挑战。由于HDFS主要针对大型数据集(M字节以上)设计,大量小文件的出现可能导致Namenode内存使用效率下降、RPC调用速度减慢、block扫描处理速度降低,从而影响整个应用
2021-11-14
Atlas web UI 使用介绍 Atlas web UI 使用介绍
1. 导入hive元数据[root@hnode3 hook-bin]# pwd /usr/hdp/current/atlas-server/hook-bin [root@hnode3 hook-bin]# ll 总用量 16 -rwxr-x
2021-10-25
Atlas 架构与组件介绍 Atlas 架构与组件介绍
1. Atlas 概述Apache Atlas 是Hadoop社区为解决Hadoop生态系统的元数据治理问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元数据治理核心能力。用以构
2021-10-24
Ambari 添加 Atlas 组件 Ambari 添加 Atlas 组件
本文章中部署Atlas 是在 Ambari 中部署的, 如果没有 Ambari 环境, 并且想部署 Ambari 可以查看Amabari 环境部署 1. 准备工作安装 Atlas 之前需要安装好 Solr. 2. 添加 Atlas 服务
2021-10-19
ClickHouse运行时状态监控 ClickHouse运行时状态监控
1. 概述Clickhouse 在运行时会将一些运行装白保存到系统表中,在对 clickhouse 进行监控时也会从这些系统表中获取数据了解 clickhouse 的运行状态。 clickhouse 元数据表中系统监控相关的表 但是直接查询
2021-09-26
ClickHouse函数 6.聚合函数组合 ClickHouse函数 6.聚合函数组合
1. 聚合函数组合器聚合函数的名称可以附加一个后缀。 这改变了聚合函数的工作方式。 If Array ForEach OrDefault OrNull Resample State Merge MergeState 2
2021-09-21
ClickHouse函数 5.聚合函数 ClickHouse函数 5.聚合函数
1. 创建测试表-- 创建雇员表 CREATE TABLE emp( `empno` UInt16 NOT NULL COMMENT '员工编码', `ename` String COMMENT '员工姓名', `j
2021-09-16
ClickHouse 本地查询工具 clickhouse-local 参数说明 ClickHouse 本地查询工具 clickhouse-local 参数说明
1. 介绍clickhouse-local 是 ClickHouse 提供的本地查询工具。它可以在不连接 ClickHouse Server 的情况下,直接对本地文件或标准输入执行 SQL。 这个工具比较适合下面几类场景: 临时分析 CS
2021-09-15
13 / 35