Nunit: 프로그래밍 방식으로 테스트 사례 및 해당 범주 목록을 추출하는 방법입니다.

안녕하세요,
나는 최근에 동일한 작업을 수행하는 데 시간을 보냈고 현재 솔루션(당신에게 효과가 있을 수도 있고 그렇지 않을 수도 있음)에 정착하기 전에 몇 가지를 시도했습니다. 다른 nunit3 테스트 프로젝트(일부는 dotnet 프레임워크를 대상으로 하고 일부는 dotnet 코어를 대상으로 함)에서 작동하는 상당히 범용적인 솔루션이 필요했습니다. 처음에는 리플렉션과 어셈블리 로딩을 시도했고 ITestBuilder 인터페이스에서 BuildFrom() 를 호출했습니다. 그것은 대부분의 프로젝트에서 효과가 있었지만 모든 프로젝트는 아니었고 많은 작업처럼 느껴졌고 NUnit이 무거운 작업을 수행하도록 하고 싶습니다.

다음으로 NUnit 엔진 API (예를 보려면 아래로 스크롤)를 시도했고 dotnet 프레임워크를 대상으로 하는 nunit 프로젝트에서 작동했지만 dotnet 코어를 대상으로 하는 프로젝트에 대한 종속성을 로드하는 문제에 부딪쳤습니다. 물론 YMMV도 마찬가지였습니다.

결국 내 솔루션이 다른 단위 테스트 프레임워크를 사용하는 테스트 솔루션에서도 작동하여 nunit3testadapter와 함께 사용하는 사용자 지정 vstest 테스트 로거를 만들면 좋을 것이라는 것을 깨달았습니다. 사용자 정의 로거는 DiscoveredTests 및 DiscoveryComplete 이벤트에 대한 이벤트 핸들러를 정의합니다. 로거는 발견된 테스트 케이스 객체 목록을 json 파일로 직렬화한 다음 다른 곳에서 처리합니다. 로거를 사용하려면 vstest 콘솔을 실행하고 테스트 검색만 실행되도록 /ListTests 스위치를 제공하고 사용자 지정 로거를 사용하는 또 다른 옵션: vstest.console.exe <testassemblypath> /ListTests /Logger:<customloggername> -- RunConfiguration.TestAdaptersPaths=<directoryofcustomlogger>;<directoryofnunitadapter> (이중 뒤에 공백이 있음에 유의하십시오. 하이픈). 단지에 대한 참조를 추가 Microsoft.TestPlatform.TranslationLayer 그건 당신이 vstest 객체 모델과 모두에 액세스 할 수 있기 때문에 JsonDataSerializer 발견 된 테스트 케이스의 데이터를 / 직렬화 직렬화 복원에 대한합니다. 테스트 검색 이벤트를 도입한 플랫폼 버전과 호환되기 때문에 번역 레이어 패키지의 v16 이상이 필요하다고 생각합니다. nuget에서 vstest를 다운로드하거나 Visual Studio 2019가 설치되어 있는 경우 이미 가지고 있습니다.

또 다른 대안은 vstest.console.exe 및 NUnit3Adapter를 사용하고 DumpXmlTestDiscovery 어댑터 설정을 활성화하는 vstest.console.exe <testassemblypath> /ListTests -- NUnit.DumpXmlTestDiscovery=True .

그 솔루션은 귀하의 필요에 따라 약간 오버일 수 있지만 결국 많은 코드가 되지는 못했습니다. 소비자가 vstest 버전 16 이상을 사용하기만 하면 됩니다. 제 머리로는 기억이 잘 안나지만 카테고리가 '평평해졌습니다'라고 생각합니다.

참조:

• 커스텀 로거 만들기
• 명령줄에서 vstest에 runsettings 전달
• Vstest 명령줄 인수

[편집] 예제 사용법 업데이트 - 잘못된 runconfiguration 속성을 포함했습니다.

테스트 출력 자체에 대한 DumpXmlTestDiscovery의 Xml(!)은 NUnit 엔진에서 직접 제공되며 자체적으로 변경될 가능성이 없습니다. 이것은 어댑터가 사용하는 것과 동일한 Xml 정보이므로 변경 사항이 있으면 새 어댑터가 필요하고 이전 버전과의 호환성이 손상될 수 있으므로 매우 주의해야 합니다. 그러나 파일 자체 가 확장되므로 코드에서 이를 고려해야 합니다. 그러나 테스트 검색 출력 노드를 잡는 것은 완벽하게 안전해야 합니다.

안녕하세요 @shack05 와 @OsirisTerje ,

귀하의 통찰력에 감사드립니다!

모든 솔루션을 요약하려면:

1) 반사:
어셈블리 x = Assembly.GetExecutingAssembly();
var 클래스 = x.GetExportedTypes();

        foreach (System.Type type in classes)
        {
            MethodInfo[] methods = type.GetMethods();
            foreach (MethodInfo methodInfo in methods)
            {
                if ((methodInfo.GetCustomAttributes(typeof(TestAttribute), true).Length == 1)

...

2) NUnit 엔진 API:

ITestEngine 엔진 = TestEngineActivator.CreateInstance();

        // Create a simple test package - one assembly, no special settings
        TestPackage package = new NUnit.Engine.TestPackage(Assembly.GetExecutingAssembly().Location);

        // Get a runner for the test package
        ITestRunner runner = engine.GetRunner(package);

        var tree = runner.Explore(NUnit.Engine.TestFilter.Empty);//new NUnit.Engine.TestFilter("*"));

3) 콘솔(NUnit 또는 vstest):
nunit3-console.exe Tests.dll --explore:"nunit3-test.xml" --where="{testFilter}"

아마 1번과 3번을 섞을 것 같아요.