Разобрался. Проблема была в подключенной зависимости в пумнике, после удаления тесты перестали дублироваться. Три дня...три дня на это потратил...
<dependency> <groupId>io.qameta.allure</groupId> <artifactId>allure-testng</artifactId> <version>2.7.0</version> <scope>test</scope> </dependency>