seosem顾问,专业seo优化推广,wordpress小说模版,微信运营是干嘛的文章目录 ClickHouse快速安装教程#xff08;MacOS#xff09;1.ClickHouse2.快速安装3.快速启动3.1.启动服务器3.2.启动客户端 4.使用案例1.配置文件2.启动CK服务3.创建数据库4.创建表5.插入数据6.查询数据 ClickHouse快速安装教程#xff08;MacOS#xff09;
1.ClickHo… 文章目录 ClickHouse快速安装教程MacOS1.ClickHouse2.快速安装3.快速启动3.1.启动服务器3.2.启动客户端 4.使用案例1.配置文件2.启动CK服务3.创建数据库4.创建表5.插入数据6.查询数据 ClickHouse快速安装教程MacOS
1.ClickHouse
ClickHouse®是一个用于在线分析处理OLAP的高性能、面向列的SQL数据库管理系统DBMS。ClickHouse专门针对大规模数据分析和实时查询的场景进行优化。它被设计用于高效处理PB级以上的数据并能在秒级内完成复杂的查询分析。
OLAP场景的关键特征
绝大多数是读请求数据以相当大的批次( 1000行)更新而不是单行更新;或者根本没有更新。已添加到数据库的数据不能修改。对于读取从数据库中提取相当多的行但只提取列的一小部分。宽表即每个表包含着大量的列查询相对较少(通常每台服务器每秒查询数百次或更少)对于简单查询允许延迟大约50毫秒列中的数据相对较小数字和短字符串(例如每个URL 60个字节)处理单个查询时需要高吞吐量(每台服务器每秒可达数十亿行)事务不是必须的对数据一致性要求低每个查询有一个大表。除了他以外其他的都很小。查询结果明显小于源数据。换句话说数据经过过滤或聚合因此结果适合于单个服务器的RAM中
ClickHouse具有以下特点
高性能采用了列式存储和压缩技术在处理大规模数据时能够快速高效地进行数据读取和查询。它使用了向量化查询引擎和多级缓存可以实现即时的查询结果响应。分布式架构支持水平扩展可以轻松地在集群中添加或删除节点。它使用分片和复制机制来实现高可用性和数据冗余。强大的查询功能支持标准的SQL查询语言并提供了丰富的查询函数和聚合操作可以方便地进行复杂的数据分析和数据挖掘。可伸缩性能够处理海量数据并且能够在不降低性能的情况下轻松地扩展到更多的节点以满足不断增长的数据需求。低延迟查询通过使用基于内存的数据存储和高效的查询引擎可以在毫秒级的时间范围内处理查询请求适用于需要实时响应的场景。 总之ClickHouse是一个专门用于大规模数据分析和实时查询的高性能分布式列式数据库它具有高可扩展性和低延迟查询的优势适用于需要处理大量数据和复杂查询的应用场景。
2.快速安装
本地下载ClickHouse最简单的方法是运行以下curl命令
curl https://clickhouse.com/ | sh下载ClickHouse执行本命令安装完成后你可以编辑ClickHouse的配置文件来自定义参数和设置例如监听地址、端口以及数据存储和备份的路径等。 3.快速启动
3.1.启动服务器
./clickhouse server3.2.启动客户端
./clickhouse client可以看到会出现以下警告最大线程数低于30000。处理大量同时进行的查询可能会出现问题。
Warnings:* Maximum number of threads is lower than 30000. There could be problems with handling a lot of simultaneous queries.这个警告表明当前设置的线程数可能不足以处理大量的同时查询。您可以通过修改ClickHouse的配置文件来增加线程数。在/etc/clickhouse-server/config.xml文件中找到max_threads设置并根据您的服务器性能和负载情况进行调整
4.使用案例
1.配置文件
添加配置文件 config.xml
clickhouseloggerleveltrace/levellog/Users/admin/ck/data/logs/clickhouse.log/logerrorlog/Users/admin/ck/data/logs/error.log/errorlogsize500M/sizecount5/count/loggerhttp_port8123/http_porttcp_port9000/tcp_portinterserver_http_port9001/interserver_http_portinterserver_http_host127.0.0.1/interserver_http_host listen_host0.0.0.0/listen_hostmax_connections4096/max_connectionskeep_alive_timeout300/keep_alive_timeoutmax_concurrent_queries1000/max_concurrent_queriesuncompressed_cache_size8589934592/uncompressed_cache_sizemark_cache_size5368709120/mark_cache_sizedefault_profiledefault/default_profiledefault_databasedefault/default_databasebuiltin_dictionaries_reload_interval3600/builtin_dictionaries_reload_intervalmax_session_timeout3600/max_session_timeoutdefault_session_timeout300/default_session_timeoutmax_table_size_to_drop0/max_table_size_to_dropmerge_treeparts_to_delay_insert300/parts_to_delay_insertparts_to_throw_insert600/parts_to_throw_insertmax_delay_to_insert2/max_delay_to_insert/merge_treemax_table_size_to_drop0/max_table_size_to_dropmax_partition_size_to_drop0/max_partition_size_to_drop!-- Path to data directory, with trailing slash. --path/Users/admin/ck/data//path!-- Path to temporary data for processing hard queries. --tmp_path/Users/admin/ck/data/tmp//tmp_path!-- Sources to read users, roles, access rights, profiles of settings, quotas. --user_directoriesusers_xml!-- Path to configuration file with predefined users. --!-- 此处的目录地址指向下方的users.xml --path/Users/admin/ck/users.xml/path/users_xmllocal_directory!-- Path to folder where users created by SQL commands are stored. --!-- 用户创建sql语句的存储目录 --path/Users/admin/ck/users//path/local_directory/user_directories
/clickhouse添加用户配置文件 users.xml
clickhouseprofilesdefaultmax_memory_usage10000000000/max_memory_usageuse_uncompressed_cache0/use_uncompressed_cacheload_balancingrandom/load_balancing/defaultreadonlymax_memory_usage10000000000/max_memory_usageuse_uncompressed_cache0/use_uncompressed_cacheload_balancingrandom/load_balancingreadonly1/readonly/readonly/profilesquotas!-- Name of quota. --defaultintervalqueries0/querieserrors0/errorsresult_rows0/result_rowsread_rows0/read_rowsexecution_time0/execution_time/interval/default/quotasusersdefault!-- 明文123456 --password_sha256_hex8d969eef6ecad3c29a3a629280e686cf0c3f5d5a86aff3ca12020c923adc6c92/password_sha256_hexnetworksip::/0/ip/networks profiledefault/profilequotadefault/quotaaccess_management1/access_management/default/users
/clickhouse⚠️注意 如果不配置以上配置文件使用CK默认的配置在新增用户并配置权限会出现以下问题DB::Exception: Could not insert user test because there is no writeable access 2.启动CK服务
与之前不同此处使用指定的配置文件启动也就是上节的配置文件地址。
./clickhouse server --config-file/Users/admin/ck/config.xml启动客户端与之前一样。 3.创建数据库
CREATE DATABASE IF NOT EXISTS test4.创建表
CREATE TABLE IF NOT EXISTS test.t_users
(id String COMMENT ID,name Nullable(String) COMMENT 名称,age Nullable(Int64) COMMENT 年龄,create_date Nullable(Date) DEFAULT toDate(now()) COMMENT 创建时间
) ENGINE MergeTree
PRIMARY KEY(id);5.插入数据
INSERT INTO test.t_users(id,name,age) VALUES (1, jack, 18)6.查询数据
select * from test.t_users where id 1
