JUnit 5 — пустой набор тестов в IntelliJ IDEA при использовании движка JUnit Jupiter

Короткий ответ

Если вы используете IntelliJ IDEA 2016.2, в настоящее время невозможно выполнить тестовый класс с аннотацией @RunWith(JUnitPlatform.class) в среде IDE.

Длинный ответ

Основываясь на поведении, о котором вы сообщили, после кропотливой исследовательской работы, я полагаю, что у меня есть ответ на ваш вопрос...

Если вы используете IntelliJ IDEA 2016.2 со встроенной поддержкой JUnit 5, происходит следующее.

1. IDEA запускает платформу JUnit через Launcher API, выбирая тестовый класс с аннотацией @RunWith(JUnitPlatform.class) (назовем его TestSuite).
2. Launcher обнаруживает реализации как junit-jupiter, так и junit-vintage TestEngine.
3. Движок JUnit Jupiter игнорирует TestSuite, поскольку технически он не является тестовым классом JUnit Jupiter.
4. Движок JUnit Vintage также игнорирует TestSuite, так как он снабжен аннотацией @RunWith(JUnitPlatform.class).
5. Конечным результатом является то, что ни один из зарегистрированных тестовых движков не утверждает, что он может запускать класс TestSuite.

Неинтуитивная часть заключается в том, что движок JUnit Vintage игнорирует TestSuite, хотя на самом деле он выглядит как тестовый класс на основе JUnit 4, поскольку он помечен @RunWith(). Причина, по которой он игнорируется, заключается в том, чтобы избежать бесконечной рекурсии, что объясняется в исходном коде для DefensiveAllDefaultPossibilitiesBuilder:

if ("org.junit.platform.runner.JUnitPlatform".equals(runnerClass.getName())) {
    return null;
}

Тот факт, что приведенный выше код возвращает null в таких сценариях, приводит к пустому набору.

Конечно, было бы лучше, если бы пользователь был проинформирован о таких сценариях, например, через оператор журнала. Поэтому я открыл вопросы как для JUnit 5, так и для IntelliJ для повышения удобства использования в таких сценариях.

С положительной стороны, поскольку вы используете IntelliJ IDEA 2016.2, вам не нужно использовать поддержку набора тестов. Вместо этого вы можете просто щелкнуть правой кнопкой мыши src/test/java в представлении проекта в IDEA и выбрать Run 'All Tests', и все ваши тесты будут запущены.

С уважением,

Сэм (основной коммиттер JUnit 5)

Дополнение к ответу Сэма Браннена. Мне нужен TestSuit для настройки серверной части перед запуском всех тестовых классов в пакете. Это, вероятно, невозможно через Run 'All Tests'.

Но я думаю, что нашел хороший обходной путь для этого. Я придумал это:

import org.junit.jupiter.api.BeforeAll;
import org.junit.jupiter.api.Nested;
import your.other.package.test.classes.*;

public class TestSuit {
    @BeforeAll
    public static void setup(){}

    @Nested
    public class TestExtender extends MyTestClass {}
}

Вы можете расширить каждый тестовый класс из другого пакета и добавить к нему аннотацию @Nested. Это не лучшее решение, но это обходной путь, пока IDEA или JUnit 5 не найдут другое решение для этих случаев.

Согласно официальному веб-сайту Junit:

Just make sure that the junit-vintage-engine artifact is in your test runtime path. In that case JUnit 3 and JUnit 4 tests will automatically be picked up by the JUnit Platform launcher