aisinoty810色带,china东莞seo,懒人办公ppt模板免费,asp网站下用php栏目ClickHouse 介绍
ClickHouse 是一款高性能、列式存储的开源分析型数据库#xff0c;专为在线分析处理#xff08;OLAP#xff09;场景设计。它能够处理海量数据#xff0c;支持实时查询和复杂的数据分析#xff0c;具备极高的读写性能和数据压缩能力。ClickHouse 提供了强…ClickHouse 介绍
ClickHouse 是一款高性能、列式存储的开源分析型数据库专为在线分析处理OLAP场景设计。它能够处理海量数据支持实时查询和复杂的数据分析具备极高的读写性能和数据压缩能力。ClickHouse 提供了强大的 SQL 支持包括对复杂查询、聚合操作和窗口函数的优化使其成为处理大规模数据集的理想选择。此外ClickHouse 支持分布式架构通过数据分片和副本机制能够实现高可用性和水平扩展。它广泛应用于日志分析、物联网数据处理、实时监控等领域帮助企业快速获取数据洞察驱动业务决策。
对 ClickHouse 进行可观测性建设能有效助力我们的工程师故障排查、系统优化和成本优化等。
观测云
观测云是一款专为 IT 工程师打造的全链路可观测产品它集成了基础设施监控、应用程序性能监控和日志管理为整个技术栈提供实时可观察性。这款产品能够帮助工程师全面了解端到端的用户体验追踪了解应用内函数的每一次调用以及全面监控云时代的基础设施。此外观测云还具备快速发现系统安全风险的能力为数字化时代提供安全保障。
部署 DataKit
DataKit 是一个开源的、跨平台的数据收集和监控工具由观测云开发并维护。它旨在帮助用户收集、处理和分析各种数据源如日志、指标和事件以便进行有效的监控和故障排查。DataKit 支持多种数据输入和输出格式可以轻松集成到现有的监控系统中。
登录观测云控制台在「集成」-「DataKit」选择对应安装方式当前采用 Linux 主机部署 DataKit。 开启 ClickHouse 采集
1、修改 config.xml
在 ClickHouse Server 的 config.xml 配置文件中找到如下的代码段取消注释并设置 metrics 暴露的端口号可自定义唯一即可。修改完成后重启若为集群则每台机器均需操作。
vim /etc/clickhouse-server/config.xml2、修改 clickhousev1.conf
进入 DataKit 安装目录下的 conf.d/clickhousev1 目录复制 clickhousev1.conf.sample 并命名为 clickhousev1.conf。主要修改这个 IP 和端口端口与上一步保持一致示例如下 3、重启DataKit
配置好后重启 DataKit 即可。
关键指标
这里主要列举 ClickHouse 的一部分关键指标详情可参考详细文档。
指标名描述类型单位HTTPConnectionHTTP 连接数floatcountTCPConnectionTCP 连接数floatcountInterserverConnection其他副本用于获取部分数据的连接数量floatcountMemoryTracking内存使用量floatBQuery正在执行的查询数量floatcountSelectQuery执行的 SELECT 查询数量floatcountInsertQuery执行的 INSERT 查询数量floatcountReplicatedChecks数据块一致性检查的次数floatcount
场景视图
登录观测云控制台点击「场景」 -「新建仪表板」输入 “ClickHouse” 选择 “ClickHouse 监控视图”点击 “确定” 即可添加视图。 监控器告警
ClickHouse 实例 {{instance}} HTTP 连接数告警
简要描述根据 HTTPConnection 指标设置阈值告警。 ClickHouse 实例 {{instance}} TCP 连接数告警
简要描述根据 TCPConnection 指标设置阈值告警。 ClickHouse 实例 {{instance}} 副本一致性检查次数异常告警
简要描述根据 ReplicatedChecks 指标设置突变告警当副本之间数据块一致性检查的次数最近 15 分钟比最近 30 分钟差值百分比大于阈值时进行告警。 总结
本文从指标、可视化仪表板、监控告警等角度展示了如何使用观测云这个一体化观测平台对 ClickHouse 进行全面观测大大减少了管理多个运维工具的负担让 DevOps 团队将更多精力投放到更高价值的工作中。
