cargo-test(1)

定义

cargo-test - 对包执行单元测试和集成测试

概要

cargo test [options] [testname] [-- test-options]

说明

编译并执行单元测试、集成测试以及文档测试。

测试会过滤参数 TESTNAME 和所有两个破折号(--)开头的参数, 并将它们被传递给测试二进制文件,进而传递给 libtest(rustc 的内置单元测试和宏基准框架)。 如果你同时向Cargo和二进制文件传递参数,那么 -- 后面的参数会传给二进制文件,前面的参数会传给 Cargo。 关于 libtest 参数的细节,请参见 cargo test --help 的输出,并查看 the rustc book 中关于测试如何工作的章节 https://doc.rust-lang.org/rustc/tests/index.html

下面这个例子,将过滤名称中含有foo的测试,并在3个线程中并行运行:

cargo test foo -- --test-threads 3

测试是用 rustc--test 选项建立的,它通过将你的代码与 libtest 链接来创建一个特殊的可执行文件。 这个可执行文件会自动在多个线程中运行所有带有 #[test] 属性注释的函数。 #[bench] 注释的函数也将被运行一次,以验证它们是否正常。

如果软件包包含多个测试目标,每个目标都会像前面提到的那样编译成一个特殊的可执行文件,然后被串行地运行。

可以在目标清单设置中设置 harness = false 来禁用 libtest harness , 在这种情况下,你的代码需要提供自己的 main 函数来处理运行测试。

文档测试

文档测试也是默认运行的,这是由 rustdoc 处理的。 它从库目标的文档注释中提取代码样本,然后执行它们。

与普通的测试目标不同,每个代码块都通过 rustc 编译成一个 doctest 可执行文件。 这些可执行文件在不同的进程中并行运行。 代码块的编译实际上是由 libtest 控制的测试功能的一部分,所以一些选项如 --job 可能不会生效。 请注意,doctests 的这种执行模式是不被保证的,将来可能会发生变化;谨慎依赖它。

关于编写文档测试的更多信息,请参见 rustdoc book

选项

测试选项

--no-run
编译,但不运行测试。
--no-fail-fast
运行所有的测试,无论是否失败。 如果没有这个标志,Cargo 会在第一个可执行程序失败后退出。 Rust test harness 会运行可执行文件中的所有测试, 这个标志只适用于整个可执行文件。

选择包

默认情况下,当没有给出包选择选项时,选择的软件包取决于所选的清单文件 (如果没有给出 --manifest-path ,则基于当前工作目录)。 如果清单在工作空间的根目录,那么将选择工作空间的默认成员,否则将只选择清单定义的包。

工作空间的默认成员可通过根清单中的 workspace.default-members 键显式设置。 如果没有设置,虚拟工作空间将包括所有工作空间成员(相当于通过 --workspace),而非虚拟工作区将只包括根 crate 本身。

-p spec...
--package spec...
只测试指定的软件包。 关于SPEC的格式,见cargo-pkgid(1)。 这个标志可以指定多次,并支持常见的 Unix glob pattern,比如 *, ?[]。 然而,为了避免你的 shell 在 Cargo 处理 glob pattern 之前意外地扩展它们,你必须在每个 pattern 周围使用单引号或双引号。
--workspace
测试工作空间中的所有成员。
--all
--workspace的别名,已弃用。
--exclude SPEC...
排除指定的包。 必须与--workspace标志一起使用。 这个标志可以被多次指定,并且支持常见的 Unix glob pattern,比如 *, ?[]。 然而,为了避免你的 shell 在 Cargo 处理 glob pattern 之前意外地扩展它们,你必须在每个 pattern 周围使用单引号或双引号。

选择目标

当没有给出目标选择选项时, cargo test 将构建所选软件包的以下目标。

  • lib - 用于与二进制文件、示例、集成测试和文档测试链接
  • bins (只有在集成测试已经建立并且所需 feature 可用的情况下)
  • examples - 确保它们能编译
  • lib 作为一个单元测试
  • bins 作为单元测试
  • integration tests 集成测试
  • doc tests 对于类库构建目标的文档测试

可以通过在清单设置中为目标设置 test 标志来改变默认行为。 将 examples 设置为 test = true 会将 examples 作为测试来构建和运行。 将目标设置为 test = false 默认不会对其进行测试。 根据目标名称选择目标的选项会忽略 test 标志,并总是测试给定的目标。

可以通过在清单中为类库设置 doctest = false 来禁用类库的文档测试。

如果选择测试集成测试或基准测试,则自动构建二进制目标。 这样集成测试可以执行二进制文件来测试其行为。 环境变量 CARGO_BIN_EXE_<name> environment variable 在集成测试构建时被设置,以便它能使用 env macro 来定位可执行文件。

传递目标选择标志将只测试指定的目标。

注意 --bin, --example, --test--bench 标志也支持常见的 Unix glob pattern,如 *, ?[] 。 然而,为了避免你的 shell 在 Cargo 处理 glob pattern 之前意外地扩展它们,你必须在每个 glob pattern 周围使用单引号或双引号。

--lib
测试包的类库。
--bin name...
测试指定的二进制文件。这个标志可以被多次指定,并且支持常见的 Unix glob pattern 。
--bins
测试所有二进制目标。
--example name...
测试指定的例子。这个标志可以被多次指定,并且支持常见的 Unix glob pattern 。
--examples
测试所有的例子目标。
--test name...
测试指定的集成测试。这个标志可以被多次指定,并且支持常见的 Unix glob pattern 。
--tests
在测试模式下测试所有在清单中设置了 test = true 标志的目标。 默认情况下,这包括作为单元测试与集成测试构建的库和二进制文件。 请注意,这也会构建任何所需的依赖项,因此 lib 目标可能会被构建两次(一次作为单元测试,另一次作为二进制文件、集成测试等的依赖项)。 通过在目标的清单设置中设置 test 标志,可以启用或禁用目标。
--bench name...
测试指定的基准测试。这个标志可以被多次指定,并且支持常见的 Unix glob pattern 。
--benches
在基准测试模式下测试所有设置了 bench = true 清单标志的目标。 默认情况下,这包括作为基准测试构建的库和二进制文件,以及基准测试目标。 请注意,这也会构建任何所需的依赖项,因此lib目标可能会被构建两次(一次是作为基准,一次是作为二进制文件、基准测试等的依赖项)。 通过在目标的清单设置中设置 bench 标志,可以启用或禁用目标。
--all-targets
测试所有目标。 相当于指定 --lib --bins --tests --benches --examples.
--doc
只测试库的文档。这不能与其他目标选项混合使用。

选择 Feature

feature 标志允许你控制哪些功能被启用。当没有给出特性选项时,每个选定的包都会激活 default 的 feature 。

更多细节请参见the features documentation

-F features
--features features
要激活的 feature 用空格或逗号分隔的列表指定。工作空间成员的 feature 可以用 package-name/feature-name 的语法来启用。 这个标志可以被多次指定,这样可以启用所有指定的特性。
--all-features
激活所有选定包的所有可用 feature 。
--no-default-features
不激活所选包的 default 特性。

编译选项

--target triple
指定架构的测试。 默认为宿主机的架构。三元组的通用格式为 <arch><sub>-<vendor>-<sys>-<abi>。运行 rustc --print target-list 来获取支持的目标列表。 这个标志可以指定多次。

这也可以与 build.target config value 一起使用。

注意,指定这个标志会使 Cargo 在不同的模式下运行,目标 artifacts 被放在一个单独的目录中。 更多细节请参见 build cache 文档。

-r
--release
release 配置文件测试优化的 artifacts 。 请参阅 --profile 选项,通过名称选择一个特定的配置文件。
--profile name
用给定的配置文件进行测试。 关于配置文件的更多细节,请参见 the reference
--ignore-rust-version
即使选择的 Rust 编译器比项目的 rust-version 字段中配置的所需的Rust版本要低,也要测试目标。
--timings=fmts
输出每次编译所需时间的信息,并跟踪一段时间的并发信息。 接受一个可选的逗号分隔的输出格式列表; 没有参数的 --timings 将默认为 --timings=html 。 指定一个输出格式(而不是默认的)是不稳定的,需要 -Zunstable-options 。 有效的输出格式:

  • html (不稳定,需要 -Zunstable-options): 在 target/cargo-timings 目录下写一个方便阅读的文件 cargo-timing.html ,并附上编译报告 。 如果你想查看更早的运行情况,也可以在同一目录下写一份文件名中带有时间戳报告。 HTML输出只适合用户使用,并不提供机器可读的计时数据。
  • json (不稳定,需要 -Zunstable-options): 发出机器可读的JSON格式的计时信息。

输出选项

--target-dir directory
所有生成的 artifacts 和中间文件的目录。 也可以用 CARGO_TARGET_DIR 环境变量或 build.target-dir config value 来指定。 默认为工作空间根目录下的 target

显示选项

默认情况下,Rust test harness 会隐藏测试执行的输出,以保持结果的可读性。 测试输出可以通过向测试二进制文件传递 --nocapture 来恢复(例如,用于调试):

cargo test -- --nocapture
-v
--verbose
使用 verbose 级别输出详细信息。 指定两次此选项来输出 "十分详细" 的输出信息, 这会包含额外的输出信息,比如依赖警告和构建脚本输出。 也可以与 term.verbose config value 一起使用。
-q
--quiet
不要打印任何 cargo 日志信息。 也可以与 term.quiet config value 一起使用。
--color when
控制的日志的颜色。 有效的值如下:

  • auto (默认): 自动检测终端颜色支持是否可用。
  • always: 总是带颜色显示。
  • never: 不带颜色显示.

也可以与 term.color config value 一起使用。

--message-format fmt
诊断信息的输出格式。可以多次指定,由逗号分隔的数值组成。有效值:

  • human (默认): 以人类可读的文本格式显示。与 shortjson冲突。
  • short: 生成更短的、人类可读的文本信息。 与humanjson 冲突。
  • json: 生成 JSON 信息输出到 stdout. 更多细节请参见 the reference。 与 humanshort冲突。
  • json-diagnostic-short: 确保 JSON 信息的 rendered 包含来自 rustc 的 "short" 渲染。 不能与 humanshort 一起使用。
  • json-diagnostic-rendered-ansi: 确保 JSON 信息的 rendered 包含 嵌入式ANSI颜色代码来兼容 rustc 的默认颜色方案。 不能与 humanshort 一起使用。
  • json-render-diagnostics: 指示 Cargo 在打印的JSON信息中不包含 rustc 的诊断信息, 而是由 Cargo 自己来渲染来自 rustc 的 JSON 诊断信息。 Cargo 自己的 JSON 诊断程序和其他来自 rustc 的诊断程序仍然会被生成出来。 不能与 humanshort 一起使用。

清单选项

--manifest-path path
Cargo.toml 文件的路径. 默认情况下,Cargo 会在当前目录或任何父目录下搜索 Cargo.toml 文件。
--frozen
--locked
这两个标志都要求 Cargo.lock 文件是最新的。 如果 .lock 文件缺失,或者需要更新,Cargo 将以错误退出。 --frozen 标志也可以防止 Cargo 访问网络以确定其是否过期。

这些可以用于需要判断 Cargo.lock 文件是否最新(比如CI构建)或者想避免网络访问的环境中。

--offline
禁止 Cargo 在任何情况下访问网络。 如果没有这个标志,当 Cargo 需要访问网络而网络不可用时,它会以错误的方式停止。 有了这个标志,Cargo会尝试在没有网络的情况下进行。

请注意,这可能会导致与在线模式不同的依赖方案。Cargo 会将自己限制在本地的 crate 仓库上, 即使在本地拷贝的索引中可能有更新的版本也是如此。 参见 cargo-fetch(1) 命令来在离线前下载依赖关系。

也可以用 net.offline config value 来指定。

通用选项

+toolchain
如果 Cargo 已经和 rustup 一起安装, 并且 cargo 的第一个参数以 + 开头, 它将被解释为一个rustup工具链的名字 (比如 +stable 或者 +nightly)。 更多关于工具链覆盖工作的信息,请参见 rustup documentation
--config KEY=VALUE or PATH
覆盖一个 Cargo 配置值。参数应该使用 TOML 的 KEY=VALUE 语法,或者提供一个额外配置文件的路径。 这个标志可以被多次指定。更多信息请参见 command-line overrides section
-h
--help
打印帮助信息。
-Z flag
Cargo 的不稳定 (仅限 nightly 版本) 标志。 更多信息请运行 cargo -Z help

其他选项

--jobs 参数会影响测试可执行文件的构建,但不影响运行测试时使用多少个线程。 Rust test harness 包括一个选项来控制使用的线程数:

cargo test -j 2 -- --test-threads=2
-j N
--jobs N
要运行的并行作业的数量。 也可以通过 build.jobs config value 配置值来指定。 默认为逻辑CPU的数量。如果是负数,它将最大的并行作业数量设置为逻辑CPU的数量加上所提供的值。不应该是0。
--keep-going
尽可能多地构建依赖关系图中的 crates, 而不是有一个 crate 构建失败则中止构建。 不稳定,需要 -Zunstable-options
--future-incompat-report
展示一个未来兼容性报告(future-incompat report),显示在执行此命令过程中产生的任何未来不兼容(future-incompatible)的警告

请参阅 cargo-report(1)

环境

更多关于 Cargo 读取的环境变量信息,请参见the reference

退出状态

  • 0: Cargo 成功退出.
  • 101: Cargo 错误退出.

示例

  1. 执行当前包的所有单元和集成测试:

    cargo test
    
  2. 只运行名称与过滤字符串匹配的测试:

    cargo test name_filter
    
  3. 在一个特定的集成测试中只运行一个特定的测试:

    cargo test --test int_test_name -- modname::test_name
    

另请参见

cargo(1), cargo-bench(1), types of tests, how to write tests