Testmanagement mit Visual Studio 2013 / CodedUI / Neues aus der Produktgruppe

Testmanagement mit VS 2013

Nico Orschel, MVP ALM, AIT GmbH & Co. KG

Aktuelle Herausforderungen

Visual Studio Familie

Testmanagement

Manuelle Testausführung

Agenda

Continous Delivery

Parallele Releases

Agile Prozesse

Zusammenarbeit mit Kunden und Zulieferern

Multi Plattform (Tablets, Smartphones, andere)

Testumgebungen, Testautomatisierung

Herausforderungen

E X T E N S I B L E A P I s

Version Control

Build Automation

CustomizableProcesses

RequirementsManagement

Test CaseManagement

ProjectManagement

End-to-EndTraceability

Lab ManagementAnalytics

Wie ordnet sich TCM in die TFS/VS Welt ein?

Microsoft Testmanager (MTM)

• Testmanagement

•Man. Testausführung (Formal+Agile)

• Testumgebungsmanagement

Visual Studio (Testautomatisierung)

• Code

• Autom. Testausführung

(DefaultLabTemplate.XAML)*

Lab Management (Testumgebungen)

• SCVMM

• Standard

Die Qual der Wahl: MTM vs. Test Hub

TCM – Hierarchischer Aufbau

Team Projekt

Test Plan

Release 1Test Plan Release 2 …

Test Suite 1Test Suite

Shared

Test 1

DatenTest

Test 2

Konfiguratione

Testplanung

Testsuite Struktur

Testplan-Name

Automated Tests

Backend

Services

Manual Tests

Backend

Services

Planung Gesamt

MyEvent_1.0

Test Case 1

Test Case 2

Test Case 3

Services

Planung Sprint 1

MyEvent_1.0 UI Test Case 1

Planung Sprint 2

MyEvent_1.0 UI

Test Case 1

Test Case 3

Planung Sprint 3

MyEvent_1.0 UI

Test Case 2

Test Case 3

Planung Gesamt

MyEvent_1.0

Test Case 1

Test Case 2

Test Case 3

Test Case 4

Services

Planung Sprint 4

MyEvent_1.0 UI

Test Case 3

Test Case 4

TCM Sprintplanung

Sprint 1 Sprint 2 Sprint 3 Sprint 4

Repository v 1.0CopyCopyCopy Copy

TCM Baselining bei mehren Releases

Repository v 1.0

Repository v 2.0

Demo WebAccess Testhub

Testmanagement

Demo WebAccess Testhub

Testdurchführung

Demo MTM

Testdurchführung

KONTAKTNico.Orschel@aitgmbh.de

+49 151 55052624

AIT GmbH & Co. KGLeitzstr. 45, 70469 Stuttgart

www.aitgmbh.de

BERATUNGAgile ALM und TFS

.NET und Architektur

ENTWICKLUNGDienstleister für individuelle

Lösungen mit .NET und Azure

ggf. nicht gesondert gekennzeichnet. Aus dem Fehlen der Kennzeichnung kann nicht geschlossen werden, daß es sich bei einem Begriff oder einem Bild nicht um eine

eingetragene Marke oder ein eingetragenes Warenzeichen handelt.

Wir unterstützen Sie

UI - Testautomatisierung

Der nächste Schritt

CodedUI Einordnung und Basics

Der erste Test

Win 8.1 Apps

Optimierung

Lokalisierung, Performance und Wartung

Agenda

Wie ordnet sich CodedUI

in die TFS/VS Welt ein?

Microsoft Testmanager (MTM)

• Testmanagement

•Man. Testausführung (Formal+Agile)

• Testumgebungsmanagement

Visual Studio (Testautomatisierung)

• Code

• Autom. Testausführung

(DefaultLabTemplate.XAML)*

Lab Management (Testumgebungen)

• SCVMM

• Standard

Technologie

TestautomatisierungWie ist CodedUI einzuordnen?

Welche Werkzeuge stehen mir zur

Verfügung?

Welche Technologien werden

unterstützt?

UI Testing

FrameworkWie werden die Technologien

eingebunden?

Unterstützte Plattformen

Technology Support Comment

IE 8-11 Yes Older IEs are not supported

anymore

WinForms 2.0, WPF 3 Yes 3rd party controls could be a

problem

Win 8.1 Store Apps Yes VS 2013

Chrome, Firefox Yes Latest version via Selenium

Adapter, (> VS 2012 Update 1,

VS 2013)

Silverlight No Unofficial support for

Silverlight v4/v5 (only VS 2012)

Flash, Java, Mobile No e.g. Ranorex, Squish

Windows Win32 / MFC Partially May work with known issues

SharePoint Yes > SP 2007, > VS 2012 Update

1, VS 2013Vollständige Liste siehe

http://msdn.microsoft.com/en-

us/library/vstudio/dd380742.aspx

UITest Architektur

Web Plug-ins

(MSHTML/DOM)

Interpreter

Coded UI Test

Generation

Test Runner

PlaybackRecorder

Rich Client Plug-ins

(UIA/MSAA)

Filter/

Aggregation

APIProperty

Provider

3rd Party Plug-ins

Action

Invoker

Technology Abstraction Layer

Demo 1

Der erste CodedUI Test

Demo 2 – Win 8.1

Touch this …

Anwendungsoptimierung

UI TechnologyOptimierung der

Anwendung für gute Test-

automatisierung

notwendig

MSAAWinforms / MFC

AccessibleDescription

Accessible Name

UIAWPF

AutomationProperties.Name

und AutomationId

Demo 3

Optimierung

Page object pattern

Within your web app's UI there are areas

that your tests interact with. A Page

Object simply models these as objects

within the test code. This reduces the

amount of duplicated code and means

that if the UI changes, the fix need only

be applied in one place. https://code.google.com/p/selenium/wiki/PageObjects

Dutch way of testing

Within your web app's UI there are areas

that your tests interact with. A Page

Object simply models these as objects

within the test code. This reduces the

amount of duplicated code and means

that if the UI changes, the fix need only

be applied in one place. https://code.google.com/p/selenium/wiki/PageObjects

Demo 4

Lokalisierung, Performance und Wartung

+49 151 55052624

www.aitgmbh.de

Weiterführende Informationen

Testing Workshops von AIT (Standard / Inhouse)

http://www.aitgmbh.de/aktuelles/aktuelle-meldungen/detail/article/workshops-testautomatisierung-mit-codedui-und-visual-studio-lab-management.html

Internet

http://blog.aitgmbh.de/2011/01/07/codedui-diagnose-von-msaa-oder-uia-problemen-in-anwendungen-teil-1/

http://blog.aitgmbh.de/2011/01/20/codedui-wpf-anwendungen-fr-codedui-vorbereiten-teil-2/

http://blog.aitgmbh.de/2011/01/28/codedui-winforms-anwendungen-fr-uitest-vorbereiten-teil-3/

http://en.wikipedia.org/wiki/Microsoft_Active_Accessibility

http://en.wikipedia.org/wiki/Microsoft_UI_Automation

http://acccheck.codeplex.com/

http://blogs.msdn.com/b/mathew_aniyan/archive/2010/02/11/content-index-for-coded-ui-test.aspx

http://www.microsoft.com/en-us/download/details.aspx?id=8442

Twitter

http://www.twitter.com/nicoorschel

Neuigkeiten aus der Produktgruppe …

Releasezyklen

On-Premise

Code Lens

Agile Testing

Storyboarding

Charting

Load Testing

Azure Dev/Test mit MSDN

Roadmap

Agenda

Test (Load Testing in the cloud)

CodeLens

Incoming Changes Code Lens (VS 2013 Update 2)

Dev (CodeLens, Peek Definition und Scroll

Storyboarding

Storyboarding, Exploratives Testen,

FeedbackClient

Visual Studio 2013 Preview in Azure Catalog

Test (AzureVM and WebApp)

Visual Studio 2013Release Feature Ultimate with

Premium with

Test Professional

with MSDN

Professional with

Professional

Update 1 Code Map ■

Update 2Code Map Debugger

Integration■

VS 2013 Memory Dump Analysis ■

VS 2013 CodeLens■

Foundation

Service

Load Testing using Team

Foundation Service ■

VS 2013IntelliTrace Performance

Indicators

VS 2013 Peek Definition ■ ■ ■ ■

VS 2013Profile Guided

Optimization for C++ apps■ ■ ■ ■

Update 2 Unit Test Profiling ■ ■ ■ ■

VS 2013Office 365 Cloud Business

Apps■ ■ ■ ■

Visual Studio ALM Roadmap

Enterprise ready VS Online

Extensibility & Interop

Agile planning

Version control

Team Explorer Everywhere

Testing

Release management

Application Insights

Overview

Release management

DEV QAINT PRODTFS

Automates Deployments

DEV QAINT PRODTFS

Automate the pipeline workflow

DEV QAINT PRODTFS

Full Traceability

Stage Stack

A modern application – connected components

Clients

Browser

Device

Desktop

Servers

Databases

Services

Experience starts and ends with the user

User experience is what ultimately matters

Plenty of opportunities for things to go wrong

iPhone app crashed

Server request too slow

Database overloadedDownstream service down

Feature too hard to use

1. Telemetry is collected at each

component: usage, performance,

exception, crash, event, synthetic

transactions, logs, developer-

supplied event data

2. Telemetry arrives to

Application Insights service

where it is processed

3. A 360 degree view of the

application – keep it available,

performing and improving.

Application

Insights

service

Telemetry sources

platform

infrastructure

Outside-in monitoring

Developer-emitted traces and events

Observed application behavior

Infrastructure performance

“Meta-telemetry”

URL pings and web tests from 16 global pointsof presence.

Whatever the developer would like to sendto Application Insights.

No coding required – service dependencies,queries, response time, exceptions, logs, etc.

System performance counters.

Source code, builds, deployments, configurationchanges.

2 Observed user behaviorHow is the application being used?

Progressively “light up” the application

Start with any component of the application and add more later.

Increase visibility at each component.

Basic performanceInstall agent on platform – no change to application.

Non-invasive

Code change

Ping test/synthetic transactionsConfigure URL ping or deploy web tests – no application impact.

Application usageInject agent into application –little or no developer effort.

Custom telemetryUsing SDK developer emits custom events to the service.

+49 151 55052624

www.aitgmbh.de

Testmanagement mit Visual Studio 2013 / CodedUI / Neues aus der Produktgruppe

Technology

Ersatzteilliste 2361 Produktgruppe 23 Turia Lina · PDF fileErsatzteilliste 2361 Blatt 1 von 9 18.11.2013 Produktgruppe 23 Turia Lina Compact Turia Lina Compact 23/6251 Stahlblechseiten

Ersatzteilliste 2351 Produktgruppe 23 Santorini Compact fileErsatzteilliste 2351 Blatt 1 von 19 07.10.2010 Produktgruppe 23 Santorini Compact Typ-Nr. 23/5350 Stahlblechseiten, Keramikabdeckung

Automatisierte Softwaretests, Testmanagement und ... · Testlösungen und bietet Testmanagement und Testautomatisierung, risiko-basiertes Testen und Test Case Design, Reporting, Dashboard

Produktgruppe 03 Applikationshilfen - GKV-Spitzenverband

Automatisierte Softwaretests, Testmanagement und ... · Testmanagement und Qualitätssicherung Bessere Effektivität und Efﬁ zienz im Test TOSCA OneView für Exzellenz im Test •

Testmanagement in der agilen Transition - Kay Grebenstein @ DWX2016

Marti · Datenhaltungssysteme VSAM, DB2, IMS Compuware Testmanagement und Performance-Software: Xpediter QACenter File-Aid Abend-AID Strobe Sprachkenntnisse Muttersprache Deutsch

Testmanagement Consulting

Einzelplan 6.2 - Behörde für Umwelt und Energie€¦ · Produktgruppe 293.11 Immissionsschutz und Abfallwirtsch. 131. 2.4.1.2. Produktgruppe 293.12 Bezirkliche Zuweisungen I 140

Jahresabschluss 2009 Band 2 mit Deckblatt - Bochum · 2020-02-14 · Bezirksverwaltung Ost (Produktgruppe 11 24) Bezirksverwaltung Süd (Produktgruppe 11 25) Bezirksverwaltung Südwest

Paradigmenwechsel im Testmanagement

Testmanagement: Failing State oder blühende Demokratie? Von Holger Wolff, MaibornWolff

Testmanagement mit Visual Studio 2013

Praxiswissen Softwaretest – Testmanagement · »Test, Analyse und Verifikation von Software« im Fachbereich Softwaretechnik der Gesellschaft für Informatik (GI). Seine Lehr-und

Praxiswissen Softwaretest – Testmanagement€¦ · Advanced Level nach ISTQB-Standard 4., überarbeitete u. erweiterte Auflage Andreas Spillner / Thomas Roßner / Mario Winter

Bekanntmachung des Spitzenverbandes Bund der … · Hinweise zur Struktur einer Produktgruppe Eine Produktgruppe besteht aus folgenden Bereichen: Gliederung Jeder Produktgruppe ist

Vorsicht Geldverschwendung!filmargumente.de/simpex_de/Katalog2017/k177.pdfzur vorherigenen Produktgruppe zurück zur Produktauswahl zur nächsten Produktgruppe zur vorherigenen Produktgruppe

Produktgruppe 512 Umbau- und Montageanweisung 1 von 42 M ... · x 2 3 Produktgruppe 512 Umbau- und Montageanweisung 2 von 42 M.-Nr. 09087201 06.02.2014 Diese Unterlagen dürfen ohne

Hier soll der Titel rein Erfolgsgeheimnisse im Testmanagement Auf die Testmanager kommt es an! Veranstalter: imbus AG Mit Stichproben-Reviews

Continuous Delivery - Lattwein GmbH · Jenkins Beschreibung Testmanagement verfasst Release-Log, dokumentiert und kommuniziert diesen an ... SonarQube . Jenkins – use cases: Release