- 安装
- 文档
- 入门
- 连接
- 数据导入
- 客户端 API
- 概览
- ADBC
- C
- C++
- CLI
- Dart
- Go
- Java (JDBC)
- Julia
- Node.js (已弃用)
- Node.js (Neo)
- ODBC
- PHP
- Python
- R
- Rust
- Swift
- Wasm
- SQL
- 介绍
- 语句
- 概览
- ANALYZE
- ALTER TABLE
- ALTER VIEW
- ATTACH 和 DETACH
- CALL
- CHECKPOINT
- COMMENT ON
- COPY
- CREATE INDEX
- CREATE MACRO
- CREATE SCHEMA
- CREATE SECRET
- CREATE SEQUENCE
- CREATE TABLE
- CREATE VIEW
- CREATE TYPE
- DELETE
- DESCRIBE
- DROP
- EXPORT 和 IMPORT DATABASE
- INSERT
- LOAD / INSTALL
- PIVOT
- 性能分析
- SELECT
- SET / RESET
- SET VARIABLE
- SUMMARIZE
- 事务管理
- UNPIVOT
- UPDATE
- USE
- VACUUM
- 查询语法
- SELECT
- FROM 和 JOIN
- WHERE
- GROUP BY
- GROUPING SETS
- HAVING
- ORDER BY
- LIMIT 和 OFFSET
- SAMPLE
- 展开嵌套
- WITH
- WINDOW
- QUALIFY
- VALUES
- FILTER
- 集合操作
- 预处理语句
- 数据类型
- 表达式
- 函数
- 概览
- 聚合函数
- 数组函数
- 位字符串函数
- Blob 函数
- 日期格式化函数
- 日期函数
- 日期部分函数
- 枚举函数
- 间隔函数
- Lambda 函数
- 列表函数
- 映射函数
- 嵌套函数
- 数值函数
- 模式匹配
- 正则表达式
- 结构体函数
- 文本函数
- 时间函数
- 时间戳函数
- 带时区时间戳函数
- 联合函数
- 实用函数
- 窗口函数
- 约束
- 索引
- 元查询
- DuckDB 的 SQL 方言
- 示例
- 配置
- 扩展
- 核心扩展
- 概览
- 自动补全
- Avro
- AWS
- Azure
- Delta
- DuckLake
- 编码
- Excel
- 全文搜索
- httpfs (HTTP 和 S3)
- Iceberg
- ICU
- inet
- jemalloc
- MySQL
- PostgreSQL
- 空间
- SQLite
- TPC-DS
- TPC-H
- UI
- VSS
- 指南
- 概览
- 数据查看器
- 数据库集成
- 文件格式
- 概览
- CSV 导入
- CSV 导出
- 直接读取文件
- Excel 导入
- Excel 导出
- JSON 导入
- JSON 导出
- Parquet 导入
- Parquet 导出
- 查询 Parquet 文件
- 使用 file: 协议访问文件
- 网络和云存储
- 概览
- HTTP Parquet 导入
- S3 Parquet 导入
- S3 Parquet 导出
- S3 Iceberg 导入
- S3 Express One
- GCS 导入
- Cloudflare R2 导入
- 通过 HTTPS / S3 使用 DuckDB
- Fastly 对象存储导入
- 元查询
- ODBC
- 性能
- Python
- 安装
- 执行 SQL
- Jupyter Notebooks
- marimo Notebooks
- Pandas 上的 SQL
- 从 Pandas 导入
- 导出到 Pandas
- 从 Numpy 导入
- 导出到 Numpy
- Arrow 上的 SQL
- 从 Arrow 导入
- 导出到 Arrow
- Pandas 上的关系型 API
- 多个 Python 线程
- 与 Ibis 集成
- 与 Polars 集成
- 使用 fsspec 文件系统
- SQL 编辑器
- SQL 功能
- 代码片段
- 故障排除
- 术语表
- 离线浏览
- 操作手册
- 开发
- 内部结构
- 为什么选择 DuckDB
- 行为准则
- 发布日历
- 路线图
- 站点地图
- 在线演示
对于测试纯 SQL,我们使用 SQL 逻辑测试套件的扩展版本,该版本改编自 SQLite。每个测试都是一个独立的自包含文件,位于 test/sql
目录下。要运行位于默认 test
目录之外的测试,请指定 --test-dir <root_directory>
,并确保提供的测试文件路径是相对于该根目录的。
该测试描述了一系列 SQL 语句,以及预期的结果、statement ok
指示符或 statement error
指示符。测试文件示例如下所示
# name: test/sql/projection/test_simple_projection.test
# group [projection]
# enable query verification
statement ok
PRAGMA enable_verification
# create table
statement ok
CREATE TABLE a (i INTEGER, j INTEGER);
# insertion: 1 affected row
statement ok
INSERT INTO a VALUES (42, 84);
query II
SELECT * FROM a;
----
42 84
在此示例中,执行了三个语句。第一个语句预计会成功(前缀为 statement ok
)。第三个语句预计返回一个包含两列的单行(由 query II
指示)。该行的值预计为 42
和 84
(由制表符分隔)。有关查询结果验证的更多信息,请参阅结果验证部分。
每个文件的顶部应包含描述测试名称和分组的注释。测试的名称始终是文件的相对文件路径。分组是文件所在的文件夹。测试的名称和分组非常重要,因为它们可以用于在单元测试组中仅执行该测试。例如,如果我们要仅执行上述测试,我们将运行命令 unittest test/sql/projection/test_simple_projection.test
。如果我们要运行特定目录中的所有测试,我们将运行命令 unittest "[projection]"
。
任何放置在 test
目录中的测试都会自动添加到测试套件中。请注意,测试的扩展名很重要。sqllogictests 应该使用 .test
扩展名或 .test_slow
扩展名。.test_slow
扩展名表示测试运行时间较长,并且只有在使用 unittest *
显式运行所有测试时才会运行。扩展名为 .test
的测试将包含在快速测试集中。
查询验证
许多简单的测试通过启用查询验证开始。这可以通过以下 PRAGMA
语句完成
statement ok
PRAGMA enable_verification
查询验证执行额外的验证,以确保底层代码正确运行。其中最重要的一部分是验证优化器不会导致查询中的错误。它通过运行查询的未优化版本和优化版本,并验证这些查询的结果是否相同来实现这一点。
查询验证非常有用,因为它不仅能发现优化器中的错误,还能发现例如连接实现中的错误。这是因为未优化版本通常会使用交叉乘积运行。因此,在处理大型数据集时,查询验证可能会非常慢。因此,建议对所有单元测试开启查询验证,除了那些涉及大型数据集(超过约 10-100 行)的测试。
编辑器与语法高亮
sqllogictests 并非严格意义上的行业标准,但其他几个系统也采用了它们。解析 sqllogictests 的过程有意保持简单。所有语句都必须用空行分隔。因此,编写语法高亮工具并非极其困难。
存在一个适用于 Visual Studio Code 的语法高亮工具。我们还创建了一个支持 sqllogictests 的 DuckDB 方言的分支。您可以通过安装原始版本,然后将 syntaxes/sqllogictest.tmLanguage.json
复制到已安装的扩展中来使用该分支(在 macOS 上,它位于 ~/.vscode/extensions/benesch.sqllogictest-0.1.1
)。
还有一个适用于 CLion 的语法高亮工具。您可以通过在市场上搜索 SQLTest 直接在 IDE 上安装它。一个 GitHub 仓库也可用,欢迎提供扩展和错误报告。
临时文件
对于某些测试(例如,CSV/Parquet 文件格式测试),需要创建临时文件。任何临时文件都应在临时测试目录中创建。通过在查询中放置字符串 __TEST_DIR__
可以使用此目录。此字符串将被替换为临时测试目录的路径。
statement ok
COPY csv_data TO '__TEST_DIR__/output_file.csv.gz' (COMPRESSION gzip);
需求与扩展
为避免核心系统臃肿,DuckDB 的某些功能仅作为扩展提供。可以通过在测试中添加 require
字段来为这些扩展构建测试。如果未加载扩展,require
字段之后出现的任何语句都将被跳过。例如 require parquet
或 require icu
。
另一种用法是将测试限制为特定的向量大小。例如,在测试中添加 require vector_size 512
将阻止该测试运行,除非向量大小大于或等于 512。这很有用,因为某些功能不支持低向量大小,但我们在 CI 中使用向量大小为 2 的测试运行。