DriverTestRealm

驱动程序集成测试框架

DriverTestRealm 是一个集成测试框架,用于在密封环境中运行驱动程序。这对驱动程序作者测试其驱动程序以及系统开发者运行使用特定驱动程序堆栈的集成测试非常有用。DriverTestRealm 提供了所有驱动程序框架 API 的密封版本,并提供了与正在运行的系统几乎完全相同的环境。

DriverTestRealm 用于集成测试。对于轻量级单元测试框架,请改用模拟 DDK

DriverTestRealm 概览

DriverTestRealm 是您的测试可以访问的组件。此组件包含 DriverFramework 的所有组件,例如 DriverManager 和 DriverIndex。它模拟了这些组件所需的所有功能。

图:DriverTestRealm 的非容器化设置

DriverTestRealm 会公开用于启动 DriverTestRealm 的 fuchsia.driver.test/Realm 协议。Start 函数接受实参,这些实参可用于配置要加载的驱动程序、根驱动程序以及 DriverManager 的停机方式等。每个组件只能调用一次 Start;如果每个测试都需要新的 DriverTestRealm,则必须使用 RealmBuilder。

与驱动程序交互

请参阅将服务与 DriverTestRealm 搭配使用

包括驱动程序

默认情况下,DriverTestRealm 组件会从自己的软件包加载驱动程序。测试作者必须确保在测试软件包中添加他们预期要加载的所有驱动程序。

绑定驱动程序

默认情况下,DriverTest 领域的根驱动程序是 test-parent 驱动程序。这意味着,为了绑定驱动程序,您应创建一个绑定到测试父级的模拟驱动程序。您可以使用以下绑定规则来实现此目的:

fuchsia.BIND_PROTOCOL == fuchsia.test.BIND_PROTOCOL.PARENT;

然后,模拟驱动程序可以添加具有正确属性的设备,以便被测驱动程序绑定到模拟驱动程序。

密封型与非密封型

您可以通过两种不同的方式使用 DriverTestRealm。它既可密封使用,也可非密封使用。

密封

在 Driver Test Realm 的密封版本中,每项测试都会获得自己的 Driver Test Realm 组件版本。这意味着每个测试都是与其他测试密封或隔离的。测试不会共享任何状态,因为每个驱动程序测试 Realm 都是特定于该测试的。

图:DriverTestRealm 的密封设置

使用密封的驱动程序测试 Realm 的速度可能会较慢,因为每个测试都必须生成并设置新的组件。

非密封

使用 Driver Test Realm 的非密封方式是,在每个测试实例之间共用一个 Driver Test Realm 子组件。

图:DriverTestRealm 的非容器化设置

测试作者需要格外小心,确保在每次测试之间清除驱动程序的状态,以免各个测试之间相互交互。

使用非容器化驱动程序测试 Realm 的速度可能会快得多,因为每个测试都不需要生成和设置新的组件。测试代码也可能会更简单。

DriverTestRealm 示例

以下是使用 DriverTestRealm 在 C++ 和 Rust 中以密封和非密封方式进行测试的一些示例。

您可以在 //examples/drivers/driver_test_realm/ 中查看示例。

密封

测试作者可以使用 RealmBuilder 为每个测试创建一个新的 DriverTestRealm。DriverFramework 提供了一个使用 RealmBuilder 中的 DriverTestRealm 的实用库。

以下是将 DriverTestRealm 与 RealmBuilder 搭配使用的 BUILD.gn 文件示例。请注意,有一个特定的 DriverTestRealm GN 目标可供依赖,以便测试生成的 CML 具有正确的 RealmBuilder 权限。

C++

test("driver_test_realm_example_hermetic_cpp") {
  sources = [ "test.cc" ]
  deps = [
    "//examples/drivers/driver_test_realm/sample-driver:fuchsia.hardware.sample_cpp",
    "//sdk/fidl/fuchsia.driver.test:fuchsia.driver.test_cpp",
    "//sdk/lib/async-loop",
    "//sdk/lib/async-loop:async-loop-cpp",
    "//sdk/lib/async-loop:async-loop-default",
    "//sdk/lib/component/outgoing/cpp",
    "//sdk/lib/device-watcher/cpp",
    "//sdk/lib/driver_test_realm/realm_builder/cpp",
    "//src/lib/fxl/test:gtest_main",
    "//src/lib/testing/loop_fixture",
    "//zircon/system/ulib/fbl",
  ]
}

fuchsia_unittest_package("package") {
  package_name = "driver_test_realm_example_hermetic_cpp"
  deps = [
    # Include your test component.
    ":driver_test_realm_example_hermetic_cpp",

    # Include the driver(s) you will be testing.
    "//examples/drivers/driver_test_realm/sample-driver",

    # Include the test parent (if your driver binds to it).
    "//src/devices/misc/drivers/test-parent",
  ]
}

Rust

rustc_test("driver_test_realm_example_realm_builder_rust") {
  edition = "2021"
  testonly = true
  source_root = "test.rs"
  sources = [ "test.rs" ]
  deps = [
    "//examples/drivers/driver_test_realm/sample-driver:fuchsia.hardware.sample_rust",
    "//sdk/fidl/fuchsia.driver.test:fuchsia.driver.test_rust",
    "//sdk/lib/device-watcher/rust",
    "//sdk/lib/driver_test_realm/realm_builder/rust",
    "//src/lib/fuchsia-async",
    "//src/lib/fuchsia-component-test",
    "//third_party/rust_crates:anyhow",
  ]
}

fuchsia_unittest_package("package") {
  package_name = "driver_test_realm_example_realm_builder_rust"
  deps = [
    # Include your test component.
    ":driver_test_realm_example_realm_builder_rust",

    # Include the driver(s) you will be testing.
    "//examples/drivers/driver_test_realm/sample-driver",

    # Include the platform bus (if your driver binds to it).
    "//src/devices/bus/drivers/platform:platform-bus",

    # Include the test parent (if your driver binds to it).
    "//src/devices/misc/drivers/test-parent",
  ]

  # There's expected error logs that happen due to races in driver enumeration.
  test_specs = {
    log_settings = {
      max_severity = "ERROR"
    }
  }
}

以下测试代码会为每项测试生成一个新的 DriverTestRealm。

C++

class DriverTestRealmTest : public gtest::TestLoopFixture {};

TEST_F(DriverTestRealmTest, DriversExist) {
  // Create and build the realm.
  auto realm_builder = component_testing::RealmBuilder::Create();
  driver_test_realm::Setup(realm_builder);
  auto realm = realm_builder.Build(dispatcher());

  // Start DriverTestRealm.
  zx::result dtr_client = realm.component().Connect<fuchsia_driver_test::Realm>();
  ASSERT_EQ(ZX_OK, dtr_client.status_value());
  fidl::Result realm_result = fidl::Call(*dtr_client)->Start({});
  ASSERT_TRUE(realm_result.is_ok()) << realm_result.error_value().FormatDescription();

  fbl::unique_fd fd;
  auto exposed = realm.component().CloneExposedDir();
  ASSERT_EQ(ZX_OK, fdio_fd_create(exposed.TakeChannel().release(), fd.reset_and_get_address()));

  // Wait for driver.
  zx::result channel =
      device_watcher::RecursiveWaitForFile(fd.get(), "dev-topological/sys/test/sample_driver");
  ASSERT_EQ(channel.status_value(), ZX_OK);

  fidl::ClientEnd<fuchsia_hardware_sample::Echo> client(std::move(*channel));

  // Send a FIDL request.
  constexpr std::string_view sent_string = "hello";
  fidl::WireResult result =
      fidl::WireCall(client)->EchoString(fidl::StringView::FromExternal(sent_string));
  ASSERT_EQ(ZX_OK, result.status());
  ASSERT_EQ(sent_string, result.value().response.get());
}

Rust

#[fasync::run_singlethreaded(test)]
async fn test_sample_driver() -> Result<()> {
    // Create the RealmBuilder.
    let builder = RealmBuilder::new().await?;
    builder.driver_test_realm_setup().await?;
    // Build the Realm.
    let instance = builder.build().await?;
    // Start DriverTestRealm
    instance.driver_test_realm_start(fdt::RealmArgs::default()).await?;

    // Connect to our driver.
    let dev = instance.driver_test_realm_connect_to_dev()?;
    let driver =
        device_watcher::recursive_wait_and_open::<fidl_fuchsia_hardware_sample::EchoMarker>(
            &dev,
            "sys/test/sample_driver",
        )
        .await?;

    // Call a FIDL method on the driver.
    let response = driver.echo_string("Hello world!").await.unwrap();

    // Verify the response.
    assert_eq!(response, "Hello world!");
    Ok(())
}

#[fasync::run_singlethreaded(test)]
async fn test_platform_bus() -> Result<()> {
    // Create the RealmBuilder.
    let builder = RealmBuilder::new().await?;
    builder.driver_test_realm_setup().await?;
    // Build the Realm.
    let instance = builder.build().await?;
    // Start DriverTestRealm.
    let args = fdt::RealmArgs {
        root_driver: Some("fuchsia-boot:///platform-bus#meta/platform-bus.cm".to_string()),
        ..Default::default()
    };
    instance.driver_test_realm_start(args).await?;
    // Connect to our driver.
    let dev = instance.driver_test_realm_connect_to_dev()?;
    device_watcher::recursive_wait(&dev, "sys/platform").await?;
    Ok(())
}

非密封

以下是一个基本测试示例,该测试会启动 DriverTestRealm 组件,然后连接到 /dev 以查看已加载的驱动程序。

首先,请务必正确设置 build 规则。测试软件包需要包含 DriverTestRealm 组件以及要加载的所有驱动程序。将驱动程序添加到软件包后,这些驱动程序会自动对 DriverTestRealm 可见。

C++

test("driver_test_realm_example_non_hermetic_cpp") {
  sources = [ "test.cc" ]
  deps = [
    "//sdk/fidl/fuchsia.driver.test:fuchsia.driver.test_cpp",
    "//sdk/lib/component/incoming/cpp",
    "//sdk/lib/device-watcher/cpp",
    "//sdk/lib/driver_test_realm:static",
    "//sdk/lib/syslog/cpp",
    "//third_party/googletest:gtest",
  ]
}

fuchsia_unittest_package("package") {
  package_name = "driver_test_realm_example_non_hermetic_cpp"
  deps = [
    ":driver_test_realm_example_non_hermetic_cpp",

    # Add drivers to the package here.
    # The test-parent driver is the default root driver for DriverTestRealm.
    "//src/devices/misc/drivers/test-parent",
  ]
}

测试设置如下所示。请注意,您必须先调用 fuchsia.driver.test/Realm:Start,然后才能运行测试框架。您可以设置 Start 的参数以配置 DriverManager 实现。

C++

TEST(DdkFirmwaretest, DriverWasLoaded) {
  zx::result channel = device_watcher::RecursiveWaitForFile("/dev/sys/test");
  ASSERT_EQ(channel.status_value(), ZX_OK);
}

int main(int argc, char **argv) {
  fuchsia_logging::LogSettingsBuilder builder;
  builder.WithTags({"driver_test_realm_test"}).BuildAndInitialize();

  // Connect to DriverTestRealm.
  auto client_end = component::Connect<fuchsia_driver_test::Realm>();
  if (!client_end.is_ok()) {
    FX_LOG_KV(ERROR, "Failed to connect to Realm FIDL", FX_KV("error", client_end.error_value()));
    return 1;
  }
  fidl::WireSyncClient client{std::move(*client_end)};

  // Start the DriverTestRealm with correct arguments.
  auto wire_result = client->Start(fuchsia_driver_test::wire::RealmArgs());
  if (wire_result.status() != ZX_OK) {
    FX_LOG_KV(ERROR, "Failed to call to Realm:Start", FX_KV("status", wire_result.status()));
    return 1;
  }
  if (wire_result.value().is_error()) {
    FX_LOG_KV(ERROR, "Realm:Start failed", FX_KV("status", wire_result.value().error_value()));
    return 1;
  }

  // Run the tests.
  ::testing::InitGoogleTest(&argc, argv);
  return RUN_ALL_TESTS();
}

请注意,DriverTestRealm 启动后,测试环境便可在其组件命名空间中使用 DriverFramework 的所有 API。您可以监控 /dev/ 目录并将其打开,以连接到驱动程序。

简单示例

借助 Simple 库,测试可以使用 DriverTestRealm 和默认参数。

大多数集成测试都适用于 DriverTestRealm 的默认配置;它们无需向 Start 传递参数。如果是这种情况,SimpleDriverTestRealm 会自动启动。

C++

test("driver_test_realm_example_simple_cpp") {
  sources = [ "test.cc" ]
  deps = [
    "//sdk/lib/device-watcher/cpp",
    "//sdk/lib/driver_test_realm/simple",
    "//src/lib/fxl/test:gtest_main",
  ]
}

fuchsia_unittest_package("package") {
  package_name = "driver_test_realm_example_simple_cpp"
  deps = [ ":driver_test_realm_example_simple_cpp" ]
}

Rust

rustc_test("driver_test_realm_example_simple_rust") {
  edition = "2021"
  source_root = "test.rs"
  sources = [ "test.rs" ]
  deps = [
    "//sdk/lib/device-watcher/rust",
    "//sdk/lib/driver_test_realm/simple",
    "//src/lib/fuchsia-async",
    "//src/lib/fuchsia-fs",
    "//third_party/rust_crates:anyhow",
  ]
}

fuchsia_unittest_package("package") {
  package_name = "driver_test_realm_example_simple_rust"
  deps = [ ":driver_test_realm_example_simple_rust" ]
}

该测试看起来与前面相同,只不过它不需要设置 main 函数来调用 fuchsia.driver.test/Realm:Start

C++

TEST(SimpleDriverTestRealmTest, DriversExist) {
  zx::result channel = device_watcher::RecursiveWaitForFile("/dev/sys/test");
  ASSERT_EQ(channel.status_value(), ZX_OK);
}

Rust

#[fasync::run_singlethreaded(test)]
async fn test_driver() -> Result<()> {
    let dev = fuchsia_fs::directory::open_in_namespace("/dev", fuchsia_fs::Flags::empty())?;
    device_watcher::recursive_wait(&dev, "sys/test").await?;
    Ok(())
}

常见问题:

  • 驱动程序未绑定
    • 确保驱动程序已包含在软件包中
    • 如果使用默认的根驱动程序,请确保添加 src/devices/misc/drivers/test-parent
  • 对 /dev/ 的调用会挂起
    • 确保调用了 fuchsia.driver.test/Realm:Start
  • fuchsia.driver.test/Realm:Start 返回 ZX_ERR_ALREADY_BOUND
    • 每个组件只能调用一次 start。如果您希望为每个测试创建一个新的 DriverTestRealm,请参阅 RealmBuilder 部分。