У меня есть набор тестов на основе селена в MTM, которые представлены в виде модульных тестов. Я могу запустить их отлично, если я пойду в MTM и попрошу их запустить. Что им интересно, если у вас какой-то API, который я могу использовать, чтобы отбросить это?
У нас есть панель инструментов, написанная на ASP.NET, и мы действительно хотели, чтобы у нас была кнопка воспроизведения, которая выполнила бы план тестирования. Я не совсем уверен, что искать в этом отношении или даже если это вообще возможно.
Возможным решением является создание тестового жгута и использование рефлексии для запуска DLL, но это будет беспорядочно.
Вы можете выполнять тесты, которые вы управляете в MTM, используя TFS API.
К сожалению, этот API очень плохо документирован на MSDN, это позорно...
Мой намек: измените версию Visual Studio 2012 на странице MSDN, и вы получите дополнительную документацию (все еще слишком мало, но лучше, чем ничего...).
Ниже приведен пример запуска всех тестовых случаев, относящихся к определенному тестовому набору в вашем плане тестирования для конкретной тестовой конфигурации в тестовой среде по вашему выбору:
string tfsUri= <tfs uri like @"https://<your tfs>/tfs/<your collection>" >;
string userName = <TFS user name>;
string password = <password>,
string projectName = <TFS project name>;
int planId = <test plan id>;
int suiteId = <test suite id>;
int settingsId = <test settings id>;
int configurationId = <test configuration id>;
string environmentName = <test environment you want to run the tests on>;
TfsTeamProjectCollection tfsCollection = new TfsTeamProjectCollection(new Uri(tfsUri), new System.Net.NetworkCredential(userName, password));
tfsCollection.EnsureAuthenticated();
ITestManagementService testManagementService = tfsCollection.GetService<ITestManagementService>();
ITestManagementTeamProject project = testManagementService.GetTeamProject(projectName);
//Get user name
TeamFoundationIdentity tfi = testManagementService.AuthorizedIdentity;
ITestPlan plan = project.TestPlans.Find(planId);
ITestSuiteBase suite = project.TestSuites.Find(suiteId);
ITestSettings testSettings = project.TestSettings.Find(settingsId);
ITestConfiguration testConfiguration = project.TestConfigurations.Find(configurationId);
// Unfortunately test environment name is not exactly the name you see in MTM.
// In order to get the name of your environments just call
// project.TestEnvironments.Query()
// set a breakpoint, run this code in debuger and check the names.
ITestEnvironment testEnvironment = project.TestEnvironments.Find((from te in project.TestEnvironments.Query()
where te.Name.ToUpper().Equals(environmentName.ToUpper())
select te.Id).SingleOrDefault());
ITestRun testRun = plan.CreateTestRun(true);
testRun.Owner = tfi;
testRun.Controller = testEnvironment.ControllerName;
testRun.CopyTestSettings(testSettings);
testRun.TestEnvironmentId = testEnvironment.Id;
testRun.Title = "Tests started from the dashboard";
//Get test points
ITestPointCollection testpoints = plan.QueryTestPoints("SELECT * FROM TestPoint WHERE SuiteId = " + suite.Id + " and ConfigurationId = " + testConfiguration.Id);
foreach (ITestPoint tp in testpoints)
{
testRun.AddTestPoint(tp, tfi);
}
// This call starts your tests!
testRun.Save();
Вы можете запускать тестовые примеры с соответствующей автоматизацией из командной строки, используя MSTEST.exe, вместо использования пользовательского интерфейса, предоставленного Microsoft Test Manager. Это позволяет запускать запуск автоматически из пакетного файла.
См. Выполнение автоматических тестов из командной строки и использование MSTest из командной строки
Вот пример того, как это сделать:
Моя последняя команда
mstest /testcontainer:"C:\Trunk\Project\bin\x86\Debug\TestProject.dll" /test:SmokeTest