Подтвердить что ты не робот

Как управлять ресурсами unit test в Котлине, такими как запуск/остановка подключения к базе данных или встроенный сервер elasticsearch?

В моих тестах Kotlin JUnit я хочу запускать/останавливать встроенные серверы и использовать их в своих тестах.

Я попытался использовать аннотацию JUnit @Before для метода в моем тестовом классе, и он отлично работает, но это неправильное поведение, поскольку он запускает каждый тестовый пример, а не только один раз.

Поэтому я хочу использовать аннотацию @BeforeClass для метода, но добавление ее к методу приводит к ошибке, указывающей, что она должна быть статическим методом. У Котлина нет статических методов. И тогда то же самое относится к статическим переменным, потому что мне нужно сохранить ссылку на встроенный сервер для использования в тестовых случаях.

Итак, как мне создать эту встроенную базу данных только один раз для всех моих тестовых случаев?

class MyTest {
    @Before fun setup() {
       // works in that it opens the database connection, but is wrong 
       // since this is per test case instead of being shared for all
    }

    @BeforeClass fun setupClass() {
       // what I want to do instead, but results in error because 
       // this isn't a static method, and static keyword doesn't exist
    }

    var referenceToServer: ServerType // wrong because is not static either

    ...
}

Примечание: этот вопрос намеренно написан автором и автору (Автоответчик), так что ответы на часто задаваемые вопросы Темы Котлина присутствуют в SO.

4b9b3361

Ответ 1

Для вашего класса unit test обычно требуется несколько действий для управления общим ресурсом для группы методов тестирования. И в Котлине вы можете использовать @BeforeClass и @AfterClass не в тестовом классе, а скорее в @JvmStatic аннотация.

Структура тестового класса будет выглядеть так:

class MyTestClass {
    companion object {
        init {
           // things that may need to be setup before companion class member variables are instantiated
        }

        // variables you initialize for the class just once:
        val someClassVar = initializer() 

        // variables you initialize for the class later in the @BeforeClass method:
        lateinit var someClassLateVar: SomeResource 

        @BeforeClass @JvmStatic fun setup() {
           // things to execute once and keep around for the class
        }

        @AfterClass @JvmStatic fun teardown() {
           // clean up after this class, leave nothing dirty behind
        }
    }

    // variables you initialize per instance of the test class:
    val someInstanceVar = initializer() 

    // variables you initialize per test case later in your @Before methods:
    var lateinit someInstanceLateZVar: MyType 

    @Before fun prepareTest() { 
        // things to do before each test
    }

    @After fun cleanupTest() {
        // things to do after each test
    }

    @Test fun testSomething() {
        // an actual test case
    }

    @Test fun testSomethingElse() {
        // another test case
    }

    // ...more test cases
}  

Учитывая вышеизложенное, вы должны прочитать:

  • объекты-компаньоны - аналогично объекту Class в Java, но одноэлемент на класс, который не является статическим
  • @JvmStatic - аннотация, которая превращает метод сопутствующих объектов в статический метод внешнего класса для Java interop
  • lateinit - позволяет инициализировать свойство var позже, когда у вас есть четко определенный жизненный цикл
  • Delegates.notNull() - можно использовать вместо lateinit для свойства, которое должно быть установлено как минимум один раз перед чтением.

Вот более полные примеры тестовых классов для Kotlin, которые управляют встроенными ресурсами.

Первый скопирован и изменен из тестов Solr-Undertow, а перед запуском тестовых примеров настраивается и запускается сервер Solr-Undertow, После запуска тестов он очищает все временные файлы, созданные тестами. Он также гарантирует, что переменные среды и системные свойства верны до запуска тестов. Между тестовыми примерами он выгружает любые временные загруженные ядра Solr. Тест:

class TestServerWithPlugin {
    companion object {
        val workingDir = Paths.get("test-data/solr-standalone").toAbsolutePath()
        val coreWithPluginDir = workingDir.resolve("plugin-test/collection1")

        lateinit var server: Server

        @BeforeClass @JvmStatic fun setup() {
            assertTrue(coreWithPluginDir.exists(), "test core w/plugin does not exist $coreWithPluginDir")

            // make sure no system properties are set that could interfere with test
            resetEnvProxy()
            cleanSysProps()
            routeJbossLoggingToSlf4j()
            cleanFiles()

            val config = mapOf(...) 
            val configLoader = ServerConfigFromOverridesAndReference(workingDir, config) verifiedBy { loader ->
                ...
            }

            assertNotNull(System.getProperty("solr.solr.home"))

            server = Server(configLoader)
            val (serverStarted, message) = server.run()
            if (!serverStarted) {
                fail("Server not started: '$message'")
            }
        }

        @AfterClass @JvmStatic fun teardown() {
            server.shutdown()
            cleanFiles()
            resetEnvProxy()
            cleanSysProps()
        }

        private fun cleanSysProps() { ... }

        private fun cleanFiles() {
            // don't leave any test files behind
            coreWithPluginDir.resolve("data").deleteRecursively()
            Files.deleteIfExists(coreWithPluginDir.resolve("core.properties"))
            Files.deleteIfExists(coreWithPluginDir.resolve("core.properties.unloaded"))
        }
    }

    val adminClient: SolrClient = HttpSolrClient("http://localhost:8983/solr/")

    @Before fun prepareTest() {
        // anything before each test?
    }

    @After fun cleanupTest() {
        // make sure test cores do not bleed over between test cases
        unloadCoreIfExists("tempCollection1")
        unloadCoreIfExists("tempCollection2")
        unloadCoreIfExists("tempCollection3")
    }

    private fun unloadCoreIfExists(name: String) { ... }

    @Test
    fun testServerLoadsPlugin() {
        println("Loading core 'withplugin' from dir ${coreWithPluginDir.toString()}")
        val response = CoreAdminRequest.createCore("tempCollection1", coreWithPluginDir.toString(), adminClient)
        assertEquals(0, response.status)
    }

    // ... other test cases
}

И еще один запуск AWS DynamoDB локальный как встроенная база данных (скопированная и слегка измененная от Запуск AWS DynamoDB-local embedded). Этот тест должен взломать java.library.path, прежде чем что-либо произойдет, или локальный DynamoDB (с использованием sqlite с бинарными библиотеками) не будет запущен. Затем он запускает сервер для совместного использования для всех тестовых классов и очищает временные данные между тестами. Тест:

class TestAccountManager {
    companion object {
        init {
            // we need to control the "java.library.path" or sqlite cannot find its libraries
            val dynLibPath = File("./src/test/dynlib/").absoluteFile
            System.setProperty("java.library.path", dynLibPath.toString());

            // TEST HACK: if we kill this value in the System classloader, it will be
            // recreated on next access allowing java.library.path to be reset
            val fieldSysPath = ClassLoader::class.java.getDeclaredField("sys_paths")
            fieldSysPath.setAccessible(true)
            fieldSysPath.set(null, null)

            // ensure logging always goes through Slf4j
            System.setProperty("org.eclipse.jetty.util.log.class", "org.eclipse.jetty.util.log.Slf4jLog")
        }

        private val localDbPort = 19444

        private lateinit var localDb: DynamoDBProxyServer
        private lateinit var dbClient: AmazonDynamoDBClient
        private lateinit var dynamo: DynamoDB

        @BeforeClass @JvmStatic fun setup() {
            // do not use ServerRunner, it is evil and doesn't set the port correctly, also
            // it resets logging to be off.
            localDb = DynamoDBProxyServer(localDbPort, LocalDynamoDBServerHandler(
                    LocalDynamoDBRequestHandler(0, true, null, true, true), null)
            )
            localDb.start()

            // fake credentials are required even though ignored
            val auth = BasicAWSCredentials("fakeKey", "fakeSecret")
            dbClient = AmazonDynamoDBClient(auth) initializedWith {
                signerRegionOverride = "us-east-1"
                setEndpoint("http://localhost:$localDbPort")
            }
            dynamo = DynamoDB(dbClient)

            // create the tables once
            AccountManagerSchema.createTables(dbClient)

            // for debugging reference
            dynamo.listTables().forEach { table ->
                println(table.tableName)
            }
        }

        @AfterClass @JvmStatic fun teardown() {
            dbClient.shutdown()
            localDb.stop()
        }
    }

    val jsonMapper = jacksonObjectMapper()
    val dynamoMapper: DynamoDBMapper = DynamoDBMapper(dbClient)

    @Before fun prepareTest() {
        // insert commonly used test data
        setupStaticBillingData(dbClient)
    }

    @After fun cleanupTest() {
        // delete anything that shouldn't survive any test case
        deleteAllInTable<Account>()
        deleteAllInTable<Organization>()
        deleteAllInTable<Billing>()
    }

    private inline fun <reified T: Any> deleteAllInTable() { ... }

    @Test fun testAccountJsonRoundTrip() {
        val acct = Account("123",  ...)
        dynamoMapper.save(acct)

        val item = dynamo.getTable("Accounts").getItem("id", "123")
        val acctReadJson = jsonMapper.readValue<Account>(item.toJSON())
        assertEquals(acct, acctReadJson)
    }

    // ...more test cases

}

ПРИМЕЧАНИЕ. некоторые части примеров сокращены с помощью ...

Ответ 2

Очевидно, что для управления ресурсами с обратными вызовами до и после тестов, очевидно, есть плюсы:

  • Тесты "атомные". Тест выполняется как целое со всеми обратными вызовами. Не забудьте запустить службу зависимостей перед тестами и закрыть ее после ее завершения. Если все сделано правильно, обратные вызовы исполнения будут работать в любой среде.
  • Тесты являются самодостаточными. Нет никаких фаз внешних данных или настроек, все они содержатся в нескольких тестовых классах.

У него тоже есть минусы. Одним из важных из них является то, что он загрязняет код и заставляет код нарушать принцип единой ответственности. Тесты теперь не только что-то проверяют, но и выполняют тяжелую инициализацию и управление ресурсами. В некоторых случаях это может быть нормально (например, настройка ObjectMapper), но изменение java.library.path или java.library.path других процессов (или встроенных баз данных в процессе) не столь невинно.

Почему бы не относиться к этим службам как к зависимостям вашего теста, имеющим право на "инъекцию", как описано 12factor.net.

Таким образом, вы запускаете и инициализируете службы зависимостей где-то вне тестового кода.

В настоящее время виртуализация и контейнеры почти повсюду, и большинство машин разработчиков могут запускать Docker. И большинство приложений имеют докционированную версию: Elasticsearch, DynamoDB, PostgreSQL и так далее. Docker - идеальное решение для внешних служб, которые необходимы вашим испытаниям.

  • Это может быть сценарий, который запускается, запускается вручную разработчиком каждый раз, когда она хочет выполнить тесты.
  • Это может быть задача, выполняемая инструментом сборки (например, Gradle имеет удивительную dependsOn и finalizedBy DSL для определения зависимостей). Разумеется, задача может выполнить тот же скрипт, который разработчик выполняет вручную, используя shell-outs/process execs.
  • Это может быть задача, выполняемая IDE перед выполнением теста. Опять же, он может использовать тот же скрипт.
  • У большинства поставщиков CI/CD есть понятие "сервис" - внешняя зависимость (процесс), которая работает параллельно с вашей сборкой, и к ней можно получить доступ через обычный SDK/коннектор/API: Gitlab, Travis, Bitbucket, AppVeyor, Semaphore ,...

Этот подход:

  • Извлекает ваш тестовый код из логики инициализации. Ваши тесты будут только проверяться и больше ничего не делать.
  • Деблокирует код и данные. Добавление нового тестового примера теперь можно сделать, добавив новые данные в службы зависимостей с помощью собственного набора инструментов. Т.е. для SQL-баз данных вы будете использовать SQL, для Amazon DynamoDB вы будете использовать CLI для создания таблиц и размещения элементов.
  • Это ближе к производственному коду, где вы, очевидно, не запускаете эти службы, когда запускается ваше "основное" приложение.

Конечно, у него есть недостатки (в основном, заявления, которые я начал с):

  • Тесты не более "атомные". Служба зависимостей должна быть запущена каким-то образом перед выполнением теста. Способ, которым он запускается, может быть разным в разных средах: разработчик или CI, IDE или CLI для сборки.
  • Тесты не являются самодостаточными. Теперь ваши данные семян могут быть даже упакованы внутри изображения, поэтому его изменение может потребовать восстановления другого проекта.