创建数据库
用户可以根据业务场景创建多个数据库,同时在创建表时也需要选择目标数据库。因此如果当前集群中未存在数据库时,请先进行创建。具体操作步骤如下:
- 登录 ByteHouse 企业版控制台,进入 数据管理 界面。

- 在左上角下拉选择已创建成功的集群信息。集群创建详见创建集群。

- 在左侧点击➕按钮,选择 新建-创建库。

- 填写数据库基本信息,如下图所示。

其中库名命名规则如下:
- 请以字母或下划线开头,支持数字,字母及下划线。
- 不能使用关键字: 'system', 'default' or 'admin'。
- 最大长度不超过 63 字符。
- 单击创建按钮,完成数据库创建。
创建数据表
- 登录 ByteHouse 企业版控制台,进入 数据管理 界面。

- 在左上角下拉选择已创建成功的集群信息。

- 在左侧点击➕按钮,选择 新建-创建表,您可通过 创建表(可视化建表) 、基于DDL模板建表 和 批量建表 方式来新建数据表。

可视化建表
单击创建表,进入建表页面后填写如下建表信息,此时可以通过手动输入建表字段信息完成建表。

配置表基本信息。
参数 | 配置说明 |
---|
集群 & 数据库 | 选择已创建的集群和数据库,后续表会创建在此集群和数据库中。 |
表引擎 | - 默认为 HaMergeTree,和社区的 ReplicatedMergeTree 引擎基本兼容,详情可参见HaMergeTree。
- 如果需要根据唯一键去重功能,请选择 HaUniqueMergeTree,选此引擎后,才可以选择唯一键、生效范围、版本字段,使用方式参考:HaUniqueMergeTree。
|
数据表名称 & 描述 | 自定义表名称与描述信息。 |
配置表的列信息。您可点击上传导入批量导入表的列信息,也可在界面单击添加列按钮手动逐条添加列,或单击下方添加多行手动添加多个列。
列信息中:
表配置。在页面下方配置表的排序键、分区键、分片键等。
参数 | 配置说明 |
---|
排序键(ORDER BY) | - ByteHouse 为了提高查询性能, 存储数据时会根据排序索引顺序存储。
- 排序键可以不唯一。但是不能为 Nullable。
- 建议选择 1-3 个经常作为过滤条件的字段作为排序键,使用频率越高,对应顺序越优先。当优先级近似时,选择基数较小的排序索引位于更优先的顺序。
- 分区字段不必为排序索引。
|
分区键(PARTITION BY) & 数据生命周期(TTL) | - 分区键(PARTITION BY):
- 可选类型:
* 时间类型(Date/DateTime),选择时间类型为最佳实践,仅当选择时间分区时才可设置 TTL(数据生命周期)。分区粒度可选 DAY(按日),HOUR(按小时),MONTH(按月)。
:::warning
建议 单天数据量 > 100 亿才考虑按小时分区,或数据量过小时可选按月分区,否则建议采用按日分区。
:::
* 数字类型(Int / UInt / Float)
* 字符串类型(String) - 如果无需进行分区时,可以不选分区键。
- 分区字段不可以为 Nullable
- 数据生命周期(TTL):
- 设置数据生命周期,生效粒度为表级别。
- 数据保留时间是以“分区字段”作为基础进行计算,因此对于非时间分区的表将无法设置 TTL,系统将强制修改为永久保留。
|
分片键
(HaMergeTree引擎需配置) | 分片字段用以确保一列数据均匀分布在集群各节点下,可最大化利用集群性能进行查询,一般选择取经常出现在Group by中的字段。分片字段只能是 String/Int/UInt/Date/DateTime/DateTime64 类型,并且不能是 Nullable。 |
唯一键
(HaUniqueMergeTree引擎需配置) | 选取字段作为数据去重 (upsert) 的判断标准,可支持多个。 - 唯一键(必填):每个表只能有一个唯一键,支持最多3个字段构成组合键。如果超过3个,用户可以自行计算一个所有唯一字段的64位哈希值,并用该哈希字段作为唯一键(如果是有符号哈希值,CH需要使用Int64类型)。
- 唯一键作用范围(必填):如果是【分区粒度唯一】,保证唯一键在分区内的唯一性。如果是【表粒度唯一】,保证唯一键在表内的唯一性。表粒度唯一有额外的写入开销,建议优先使用分区粒度唯一。
- 版本字段(选填):写入相同唯一键的多条数据时,默认保留最新写入的数据。如果指定了版本字段,将保留版本最大的数据。如果使用表粒度唯一,可以额外使用分区表达式作为版本字段,即相同唯一键保留最新分区的数据。
|
跳数索引(INDEX) | 若查询条件中包含跳数索引中的字段,可以预先过滤数据,减少 IO 以加速查。您可以在界面中选择设置为跳数索引的列,并设置跳数索引的类型,当前支持以下类型:set、minmax、bloom_filter、tokenbf_v1、ngrambf_v1。 - 各类型的默认GRANULARITY均为1,一般设置成 1 就行,以获得更高的过滤率,GRANULARITY值越大存储占用越少,相应的过滤效果也可能减弱。当前的配置范围为1~10。

|
填写完成后可以单击右下角的创建提交建表任务,若无报错信息,则表示创建成功。
DDL 模板建表
单击以DDL模版创建,您可以选择常用的 新建数据库/表:基于DDL模板,复制模板并修改字段后建表。

批量建表
单击批量建表,在编辑框中输入相应建表语句,详见 SQL 语法,在编辑框中,您还可以执行以下操作:
操作 | 说明 |
---|
下载 SQL | 将编辑器中编辑的 SQL 语句,下载至本地保存。 |
上传 SQL | 将需执行的 SQL 语句,以本地文件的形式,通过上传方式,上传至编辑器中批量执行。 |
SQL 格式化 | 将书写的 SQL 进行格式化操作,增加语句可读性。 |
复制 SQL | 可对写好的 SQL 语句进行复制操作。 |
清除所有 SQL | 将编辑器中书写好的所有 SQL 语句,进行清除。 |
非 GUI 方式建表
如果通过 Client,JDBC 或其他非 GUI 的方式建表,也会每相隔 5 分钟的同步到 GUI 上。以下表引擎会被同步:
- 关联了 Distrbuted 表 的 HaMergeTree 表或 HaUniqueMergeTree 表,会被同步为“逻辑表”,该类型的表和 GUI 创建的表(同 2.1.2)无异,也是 ByteHouse 的建表最佳实践,因此,可以正常在 GUI 上进行改表,删除分区,创建导入任务等操作。
- 没有关联 Distrbuted 表的 HaMergeTree 表或 HaUniqueMergeTree 表,或社区的其他 MergeTree 家族表(如 MergeTree,DuplicatedMergeTree 等)由于不符合 ByteHouse 建表的最佳实践,会被同步为“自定义表”。仅会在 GUI 上展示 / 可被查询,不可进行改表,删除分区,创建导入任务等操作。
- MySQL、S3、Hive 等 Integration 引擎 的表,会被同步为“外表”。该类表仅会在 GUI 上展示 / 可被查询,不可进行改表,删除分区,创建导入任务等操作。
Integration 引擎中,Kafka 引擎,RabbitMQ 引擎的表因对其查询会导致丢数,暂时不会被同步。