End2End-Monitoring mit Sahi und OMD - Nagios-Wiki

End2End-Monitoringmit Sahi und OMDMonitoring-Workshop 2012, MünchenSimon Meggle, Network Monitoring Consultant14.06.2012

End2End-Monitoringmit Sahi und OMD• Einführung• Wozu das ganze?• Eigenschaften und Voraussetzungen von Sahi• Funktionsweise• Sahi-Proxy• Sahi-APIs• Live-Demo: „Login und Logout“ – ein erster Sahi-Testcase• Erklärung der aufgezeichneten Kommandos• Step-by-Step-Wiedergabe im Sahi-Controller• Sahi2OMD• Ablauf eines sahi2OMD-Testcases• Innere Werte: das Grundgerüst für Sahi-Scripts• Einrichtung als Monitoring-Check• Live-Demo: „LoginAndBuy“• Bestellen und Prüfen des Warenkorb-Inhaltes• Performancedaten14.06.2012 w w w.consol.de2

Wozu das ganze?Service aBP AService bService cwww.superwichtig.deBP BService fService gService hService kService lBP CService mService nService o14.06.2012 w w w.consol.de3

Sahi: Eigenschaften und Voraussetzungen• Was ist/kann Sahi?• entwickelt von Narayan Raman• “Build a browser automation tool or library“-> „Verify web application functionality“• Web Automation and Testing Tool“-> Tool zur Simulation von User-Aktion im Webbrowser• AJAX, Frames, iFrames, Up/Downloads, Browser alerts, NTLM Auth, HTTPS• leistungsfähige API• intelligente Objekt-Adressierung auch über Frames/iFrames hinweg (kein XPath)• vorbereitete Funktionen (z.b. Datenzugriff aus Files/Datenbanken)• Batch Mode & Multi-Threaded Playback• Sahi erkennt fertiggeladene Seiten/AJAX-Requests: no need for ‚waits‘• Sahi läuft auf jedem OS mit Java (z.b. auch iOS, Android) in jedem Browser• Sahi abstrahiert• Open Source• Was ist/kann Sahi nicht?• alles, was nicht über DOM angesprochen werden kann (z.b. Flash, Applets)• Tests außerhalb des Browserinhaltes ( AutoIt)14.06.2012 w w w.consol.de4

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/ResponseBrowserHTTP Request/ResponseWebserverWorkstation14.06.2012 w w w.consol.de5

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltetBrowserSahi-Prozesslocalhost:9999WebserverSahi Test-Host14.06.2012 6w w w.consol.de

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScriptBrowserSahi-Prozesslocalhost:9999HTTP Request/ResponseWebserverTestcaseSahi Test-Host14.06.2012 w w w.consol.de7

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScriptBrowserSahi-Prozesslocalhost:9999HTTP Request/ResponseWebserverTestcaseSahi Test-Host14.06.2012 w w w.consol.de8

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScriptBrowserSahi-Prozesslocalhost:9999HTTP Request/ResponseWebserverTestcaseSahi Test-Host14.06.2012 9w w w.consol.de

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScript• Wiedergabe durch Injizieren der SahiScriptsBrowserSahi-Prozesslocalhost:9999WebserverTestcaseSahi Test-Host14.06.2012 w w w.consol.de10

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScript• Wiedergabe durch Injizieren der SahiScriptsBrowserSahi-Prozesslocalhost:9999HTTP Request/ResponseWebserverTestcaseSahi Test-Host14.06.2012 w w w.consol.de11

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScript• Wiedergabe durch Injizieren der SahiScriptsBrowserSahi-Prozesslocalhost:9999HTTP Request/ResponseWebserverTestcaseSahi Test-Host14.06.2012 w w w.consol.de12

Funktionsweise: Sahi-Proxy• „normaler“ Webtraffic: HTTP Request/Response• Sahi wird als Proxy zwischengeschaltet• Aufzeichnung aller weitergeleiteten Requests in SahiScript• Wiedergabe durch Injizieren der SahiScripts• Auch externe Proxies werden unterstütztBrowserSahi-Prozesslocalhost:9999ProxyWebserverTestcaseSahi Test-Host14.06.2012 13w w w.consol.de

Funktionsweise: Sahi-APIs(Jetzt wird’s kurz trocken.)14.06.2012 w w w.consol.de14

Funktionsweise: DOM• DOM = Document Object Model• Norm, die den Zugriff auf Objekte in einem Markup-Dokument (z.b. HTML) bietet• Markup-Dokumente bestehen aus Knoten in einer BaumstrukturVornameNameDonaldDuckhttp://www.wiki pedia.org/14.06.2012 w w w.consol.de15

Funktionsweise: Sahi-APIsBrowser Accessor API Browser Action API Miscellaneous API14.06.2012 w w w.consol.de16

Funktionsweise: Sahi-APIs• Browser Accessor APIs• Funktionen, die den Zugriff auf DOM-Objekte im Browser ermöglichen• erwarten einen Identifier• Identifier = Indizes, IDs, Namen, CSS-Klassennamen, etc (auch als Regex)• Beispiel:

Funktionsweise: Sahi-APIs• Browser Accessor APIs – Lokalisierung mit „DOM Relations“• Funktionen, die den Zugriff auf DOM-Objekte im Browser ermöglichen• erwarten einen Identifier und eine optionale DOM Relation• Identifier = Indizes, IDs, Namen, CSS-Klassennamen, etc (auch als Regex)• DOM Relation = DOM Relation Marker(DOM Objekt)• DOM Relation Marker = Beziehung zweier Elemente im DOM:• _near()• _under()• _in()_image(“delete.gif”, _near(_cell(“usr4”))_link(„Details“, _under(_cell(„details“)))_link(„Details“, _in(_cell(„product_facts“)))• Je mehr DOM Relations verwendet werden, desto robuster werden Sahi-Cases!http://sahi.co.in/w/browser-accessor-apis14.06.2012 w w w.consol.de18

Funktionsweise: Sahi-APIs• Browser Action APIs• Funktionen, die Aktionen im Browser auslösen• Mausaktionen: _click(), _mouseOver(), _dragDrop(), ..., ...• Tastenaktionen: _keyPress(), keyDown(), ..., ...• Daten-Aktionen: _setValue(), ..., ...• Prüf-Routinen• Vergleiche : _assertEqual(), assertContainsText(), assertNotEqual()..., ...• Vorhandensein : _assertExists(), assertNotExists()..., ...• Debugging: _debug(), _prompt(), _alert()..., ...• u.v.m. ...http://sahi.co.in/w/browser-action-apis14.06.2012 w w w.consol.de19

Funktionsweise: Sahi-APIs• Miscellaneous APIs• Helper-Funktionen: _random(), _sessionInfo(), _lastDownloadedFileName(), ...• Log-Funktionen: _logException(), _stopOnError(), ...• Daten-Funktionen: _getDB(), _readFile(), _writeToFile(), _readCSVFile(), ...• Browser-Erkennung: _isIE(), _isFF(), _isChrome(), _isSafari()• u.v.m. ...http://sahi.co.in/w/miscellaneous-apis14.06.2012 w w w.consol.de20

Funktionsweise: Sahi-APIs(...geschafft!)14.06.2012 w w w.consol.de21

Live-Demo: „Login und Logout“ – der erste Sahi-Testcase14.06.2012 w w w.consol.de22

Sahi2OMD – Ablauf eines Testcases☺☺Thresholds/Case/SuiteStatus-AggregationTask Schedulernagios.inc☺Perfdatensahi2omd.vbsSahi suite(helper func)environment-Checkstart Sahi-SuiteResults einlesenState bestimmenPerfdaten (Cases+Suite)Übermittlung an OMDtmp-Datei mitErgebnissenOMD-ServerSahi-Test-Host14.06.2012 w w w.consol.de23

Sahi2OMD – Ablauf eines Testcases☺☺Thresholds/Case/SuiteStatus-AggregationTask Schedulernagios.inc☺Perfdatensahi2omd.vbsSahi suite(helper func)environment-Checkstart Sahi-SuiteResults einlesenState bestimmenPerfdaten (Cases+Suite)Übermittlung an OMDtmp-Datei mitErgebnissenOMD-ServerSahi-Test-Host14.06.2012 w w w.consol.de24

Sahi2OMD – Innere Werte: Grundgerüst für Sahi-ScriptsDas aufgezeichnete Sahi-Script wird in den „Nagios-Codeblock“ gesteckt:• Laufzeit-Thresholds werden gesetzt, Timer gestartet• Exceptions werden korrekt abgefangen• Output wird weiterverarbeitetHilfs-FunktionenFehler sollen nicht zum Abbruch führen, sondern in „catch“ abgefangen werdenThreshold für Laufzeit des Cases(ursprüngliches Sahi-Script)FehlerbehandlungSpeichern des Ergebnisses14.06.2012 w w w.consol.de25

Sahi2OMD – AutomatisierungAufruf:C:\Windows\System32\cscript.exe //Nologo C:\sahi\userdata\bin\sahi2omd.vbs-m 1-f [oxid\login_logout.sah | my.suite]-e-b firefox-u http://oxid/shop/-n omd1-h sahidose-s login_logout-m 1 : Maximale Anzahl Threads-e : expand Suite (Testcases in Suite werden als Services behandelt)-f : Pfad zur Sahi-Scriptdatei im Scripts-Verzeichnis-b : Browser (firefox | chrome | ie)-u : Start-URL-n : Name des Monitoring-Servers-h : Host name-s : Service description14.06.2012 w w w.consol.de26

Live-Demo: „Login and Buy“• Einloggen• Warenkorb leeren, falls nötig• Artikel 1• suchen• 2x bestellen• Artikel 2• suchen• 2x bestellen• Warenkorb prüfen14.06.2012 w w w.consol.de27

PerformancedatenEinzelner Testcase:sahi2omd.vbs –f mycase.sahSuite mit Serviceexpansion:sahi2omd.vbs –f mysuite.suite -eSuite ohne Serviceexpansion:sahi2omd.vbs –f mysuite.suiteOK: Sahi test 'livedemo3.sah' (12s) OK: Sahi test 'livedemo4.sah' (8s) ..., ...| livedemo1.sah=2s;15;20;; livedemo2.sah=5s;15;20;; ... oxid.suite=63s;;;; [check_sahi_suite]14.06.2012 w w w.consol.de28

Danke für die Aufmerksamkeit!14.06.2012 w w w.consol.de29