搜索快捷键 cmd + k | ctrl + k
- 安装
- 文档
- 入门
- 连接
- 数据导入
- 客户端 API
- 概览
- ADBC
- C
- C++
- CLI
- Dart
- Go
- Java (JDBC)
- Julia
- Node.js (已弃用)
- Node.js (Neo)
- ODBC
- PHP
- Python
- R
- Rust
- Swift
- Wasm
- SQL
- 介绍
- 语句
- 概览
- ANALYZE
- ALTER TABLE
- ALTER VIEW
- ATTACH 和 DETACH
- CALL
- CHECKPOINT
- COMMENT ON
- COPY
- CREATE INDEX
- CREATE MACRO
- CREATE SCHEMA
- CREATE SECRET
- CREATE SEQUENCE
- CREATE TABLE
- CREATE VIEW
- CREATE TYPE
- DELETE
- DESCRIBE
- DROP
- EXPORT 和 IMPORT DATABASE
- INSERT
- LOAD / INSTALL
- PIVOT
- 性能分析
- SELECT
- SET / RESET
- SET VARIABLE
- SUMMARIZE
- 事务管理
- UNPIVOT
- UPDATE
- USE
- VACUUM
- 查询语法
- SELECT
- FROM 和 JOIN
- WHERE
- GROUP BY
- GROUPING SETS
- HAVING
- ORDER BY
- LIMIT 和 OFFSET
- SAMPLE
- 展开嵌套
- WITH
- WINDOW
- QUALIFY
- VALUES
- FILTER
- 集合操作
- 预处理语句
- 数据类型
- 表达式
- 函数
- 概览
- 聚合函数
- 数组函数
- 位字符串函数
- Blob 函数
- 日期格式化函数
- 日期函数
- 日期部分函数
- 枚举函数
- 间隔函数
- Lambda 函数
- 列表函数
- 映射函数
- 嵌套函数
- 数值函数
- 模式匹配
- 正则表达式
- 结构体函数
- 文本函数
- 时间函数
- 时间戳函数
- 带时区时间戳函数
- 联合函数
- 实用函数
- 窗口函数
- 约束
- 索引
- 元查询
- DuckDB 的 SQL 方言
- 示例
- 配置
- 扩展
- 核心扩展
- 概览
- 自动补全
- Avro
- AWS
- Azure
- Delta
- DuckLake
- 编码
- Excel
- 全文搜索
- httpfs (HTTP 和 S3)
- Iceberg
- ICU
- inet
- jemalloc
- MySQL
- PostgreSQL
- 空间
- SQLite
- TPC-DS
- TPC-H
- UI
- VSS
- 指南
- 概览
- 数据查看器
- 数据库集成
- 文件格式
- 概览
- CSV 导入
- CSV 导出
- 直接读取文件
- Excel 导入
- Excel 导出
- JSON 导入
- JSON 导出
- Parquet 导入
- Parquet 导出
- 查询 Parquet 文件
- 使用 file: 协议访问文件
- 网络和云存储
- 概览
- HTTP Parquet 导入
- S3 Parquet 导入
- S3 Parquet 导出
- S3 Iceberg 导入
- S3 Express One
- GCS 导入
- Cloudflare R2 导入
- 通过 HTTPS / S3 使用 DuckDB
- Fastly 对象存储导入
- 元查询
- ODBC
- 性能
- Python
- 安装
- 执行 SQL
- Jupyter Notebooks
- marimo Notebooks
- Pandas 上的 SQL
- 从 Pandas 导入
- 导出到 Pandas
- 从 Numpy 导入
- 导出到 Numpy
- Arrow 上的 SQL
- 从 Arrow 导入
- 导出到 Arrow
- Pandas 上的关系型 API
- 多个 Python 线程
- 与 Ibis 集成
- 与 Polars 集成
- 使用 fsspec 文件系统
- SQL 编辑器
- SQL 功能
- 代码片段
- 故障排除
- 术语表
- 离线浏览
- 操作手册
- 开发
- 内部结构
- 为什么选择 DuckDB
- 行为准则
- 发布日历
- 路线图
- 站点地图
- 在线演示
文档 / 核心扩展
TPC-H 扩展
`tpch` 扩展实现了 TPC-H 基准测试的数据生成器和查询。
安装和加载
`tpch` 扩展在某些 DuckDB 构建中默认提供,否则将在首次使用时自动加载。如果您想手动安装和加载,请运行:
INSTALL tpch;
LOAD tpch;
用法
生成数据
要生成比例因子为 1 的数据,请使用:
CALL dbgen(sf = 1);
调用 `dbgen` 不会清除现有的 TPC-H 表。要清除现有表,请在运行 `dbgen` 之前使用 `DROP TABLE`。
DROP TABLE IF EXISTS customer;
DROP TABLE IF EXISTS lineitem;
DROP TABLE IF EXISTS nation;
DROP TABLE IF EXISTS orders;
DROP TABLE IF EXISTS part;
DROP TABLE IF EXISTS partsupp;
DROP TABLE IF EXISTS region;
DROP TABLE IF EXISTS supplier;
运行查询
要运行查询(例如查询 4),请使用:
PRAGMA tpch(4);
o_orderpriority | order_count |
---|---|
1-紧急 | 10594 |
2-高 | 10476 |
3-中等 | 10410 |
4-未指定 | 10556 |
5-低 | 10487 |
列出查询
要列出所有 22 个查询,请运行:
FROM tpch_queries();
此函数返回一个包含 `query_nr` 和 `query` 列的表。
列出预期答案
要生成所有查询在比例因子 0.01、0.1 和 1 上的预期结果,请运行:
FROM tpch_answers();
此函数返回一个包含 `query_nr`、`scale_factor` 和 `answer` 列的表。
生成 Schema
通过将比例因子设置为 0,可以生成不含任何数据的 TPC-H Schema。
CALL dbgen(sf = 0);
数据生成器参数
数据生成器函数 `dbgen` 具有以下参数:
名称 | 类型 | 描述 |
---|---|---|
catalog |
VARCHAR |
目标 catalog |
children |
UINTEGER |
分区数 |
overwrite |
BOOLEAN |
(未使用) |
sf |
DOUBLE |
比例因子 |
step |
UINTEGER |
定义要生成的分区,索引从 0 到 `children` - 1。当 `children` 参数被定义时,此参数必须被定义。 |
suffix |
VARCHAR |
将 `suffix` 添加到表名 |
预生成数据集
可下载用于 TPC-H 的预生成 DuckDB 数据库
tpch-sf1.db
(250 MB)tpch-sf3.db
(754 MB)tpch-sf10.db
(2.5 GB)tpch-sf30.db
(7.6 GB)tpch-sf100.db
(26 GB)tpch-sf300.db
(78 GB)tpch-sf1000.db
(265 GB)tpch-sf3000.db
(796 GB)
数据生成器的资源使用
生成大比例因子的 TPC-H 数据集需要大量时间。此外,如果生成过程在单个步骤中完成,则需要大量内存。下表估算了使用 128 个线程生成包含 TPC-H 数据集的 DuckDB 数据库文件所需的资源。
比例因子 | 数据库大小 | 生成时间 | 单步生成内存使用 |
---|---|---|---|
100 | 26 GB | 17 分钟 | 71 GB |
300 | 78 GB | 51 分钟 | 211 GB |
1,000 | 265 GB | 2 小时 53 分钟 | 647 GB |
3,000 | 796 GB | 8 小时 30 分钟 | 1799 GB |
上述数据是通过单步运行 `dbgen` 函数获得的,例如:
CALL dbgen(sf = 300);
如果可用内存有限,您可以分步运行 `dbgen` 函数。例如,您可以分 10 步生成 SF300:
CALL dbgen(sf = 300, children = 10, step = 0);
CALL dbgen(sf = 300, children = 10, step = 1);
...
CALL dbgen(sf = 300, children = 10, step = 9);
限制
`tpch(query_id)` 函数运行一个具有预定义绑定参数(也称为替换参数)的固定 TPC-H 查询。无法使用 `tpch` 扩展更改查询参数。要使用 TPC-H 基准测试所规定的参数运行查询,请使用 TPC-H 框架实现。