Как получить результаты CTest в Hudson/Jenkins

Ответ 1

В Jenkins, после части CMake (возможно, сделанной через плагин CMake), добавьте следующую партию script или адаптируйте для сборки в Linux:

del build_32\JUnitTestResults.xml
pushd build_32\Tests
"C:\Program Files\CMake 2.8\bin\ctest.exe" -T Test -C RelWithDebInfo --output-on-failure
popd
verify >nul
C:\Python27\python.exe external/tool/CTest2JUnit.py build_32/Tests external/tool/CTest2JUnit.xsl > build_32/JUnitTestResults.xml

• build_32 - это каталог сборки в плагине CMake
• Tests - это подкаталог, в котором все мои тесты живут
• -T Test выводит результат CTest в XML (?!)
• verify >nul сбрасывает errorlevel до 0, потому что CTest возвращает > 0, если какой-либо тест терпит неудачу, что Дженкинс интерпретирует как "вся сборка не удалась", которую мы не хотим
• Последняя строка преобразует CTest XML в минимальный JUnit xml. Python script и xslt находятся в исходном каталоге, вы можете изменить это.

Python script выглядит так (взломан в течение 10 минут, остерегайтесь):

from lxml import etree
import StringIO
import sys

TAGfile = open(sys.argv[1]+"/Testing/TAG", 'r')
dirname = TAGfile.readline().strip()

xmlfile = open(sys.argv[1]+"/Testing/"+dirname+"/Test.xml", 'r')
xslfile = open(sys.argv[2], 'r')

xmlcontent = xmlfile.read()
xslcontent = xslfile.read()

xmldoc = etree.parse(StringIO.StringIO(xmlcontent))
xslt_root = etree.XML(xslcontent)
transform = etree.XSLT(xslt_root)

result_tree = transform(xmldoc)
print(result_tree)

• Для этого нужна lxml, прямая ссылка
• Требуется два аргумента: каталог, в котором живут тесты (в каталоге сборки), и файл xsl
• Он просто считывает последние результаты тестов xml, преобразует его в xsl и выводит его на stdout
• "Последние xml-тесты" присутствуют в первой строке файла Testing/TAG, поэтому дополнительный fopen

xsl выглядит так. Это довольно минимально, но выполняет свою работу: [EDIT] см. Улучшенную версию MOnsDaR: http://pastebin.com/3mQ2ZQfa

<?xml version="1.0" encoding="UTF-8"?>
<xsl:stylesheet xmlns:xsl="http://www.w3.org/1999/XSL/Transform" version="1.0">
<xsl:output method="xml" indent="yes"/>

    <xsl:template match="/Site/Testing">    
        <testsuite>
            <xsl:apply-templates select="Test"/>
        </testsuite>
    </xsl:template>

    <xsl:template match="Test">
        <xsl:variable name="testcasename"><xsl:value-of select= "Name"/></xsl:variable>
        <xsl:variable name="testcaseclassname"><xsl:value-of select= "FullName"/></xsl:variable>
        <testcase name="{$testcasename}" classname="{$testcaseclassname}">
            <xsl:if test="@Status = 'passed'">
            </xsl:if>
            <xsl:if test="@Status = 'failed'">
                <error type="error"><xsl:value-of select="Results/Measurement/Value/text()" /></error>
            </xsl:if>
            <xsl:if test="@Status = 'notrun'">
                <skipped><xsl:value-of select="Results/Measurement/Value/text()" /></skipped>
            </xsl:if>
        </testcase>
    </xsl:template>

</xsl:stylesheet>

Наконец, отметьте "Опубликовать результаты тестов JUnit" (или аналогичные, моя версия на французском языке) и установите путь xml к build_32/JUnitTestResults.xml

Ну, это было уродливо. Но все же надеемся, что это поможет кому-то. И улучшения приветствуются (возможно, работает ctest из python? Использование пути плагина Python вместо C:...?)