Communauté Francophone de la Supervision Libre » cucumber-nagios http://www.monitoring-fr.org Supervision, monitoring, métrologie, capacity planning à la sauce Open Source Thu, 02 Feb 2012 14:55:04 +0000 en hourly 1 Cucumber + Watir + Webdriver = Tiercé gagnant de l’EUE ? http://www.monitoring-fr.org/2011/05/cucumber-watir-webdriver-eue/ http://www.monitoring-fr.org/2011/05/cucumber-watir-webdriver-eue/#comments Tue, 17 May 2011 14:46:04 +0000 Olivier Jan http://www.monitoring-fr.org/?p=2594 Ça fait un bon moment que je tourne (un peu en rond par moment ;-) dans la pile logicielle nécessaire à la supervision de bout en bout aka End User Experience et c’est tout récemment que j’ai identifié la chaîne logicielle à mettre en œuvre pour une telle supervision depuis nos ordonnanceurs favoris; au moins les « Nagios Like Compatible » (Icinga, Centreon Engine, Shinken…). Comme j’en ai fait quelques démonstrations au Salon Linux qui vient de se dérouler, il est temps de partager avec vous ces quelques informations afin de vous éviter l’ensemble des recherches que j’ai dû faire pour en arriver là.

Nous allons parcourir les différents éléments logiciels constituant une des piles possibles pour effectuer de la supervision dite de bout en bout. Commençons par le haut pour finir en bas. Mon installation comprend, outre un serveur Nagios like, une machine Ubuntu Desktop qui sert à exécuter les tests à proprement parler depuis un navigateur puisque Watir fonctionne en mode « full browser ». Le navigateur choisi est Firefox 3.6 mais IE et Safari sont aussi au menu.

Cucumber et Cucumber-nagios

Afin de raccorder le tout à notre ordonnanceur favori, il convient d’avoir un plugin qui est dans le cas de notre pile cucumber-nagios. C’est lui qui va transformer la sortie de cucumber pour qu’elle soit compatible Nagios; vous savez ce genre de chose

CUCUMBER OK - Critical: 0, Warning: 0, 2 okay | passed=2; failed=0; nosteps=0; total=2; time=0

Venons-en à un des deux morceaux de choix de cette pile. Je vous avais déjà parlé de cucumber mais je n’avais à l’époque fait qu’effleurer la surface de ce merveilleux logiciel. Depuis, j’ai compris (j’ai mis le temps ;) que celui-ci n’est qu’une couche d’abstraction au pilote qui va réellement effectuer les tests (dans le cadre de cet article Watir) et qui permet de faire rédiger les scénarios par des personnes dites fonctionnelles et pas forcément versées dans la technique. On revient ici à la notion de description des tests par le comportement attendu. C’est donc une pièce majeure qui permet de brancher un scénario identique sur n’importe quelle techno de tests de bout en bout.

Watir et Webdriver

Watir est quant à lui la partie qui permet de définir quelles sont les actions à faire exécuter par le navigateur. Après des premiers tests avec Firewatir, j’ai abandonné ce dernier au profit de Webdriver qui outre le fait qu’il est pérenne, contrairement à Firewatir qui va être abandonnée; est également utilisé par la version 2 de Selenium, la suite la plus connue à ce jour de test dans un navigateur. Je préfère néanmoins personnellement la syntaxe limpide de Watir mais tout est question de goût. Le point important est que dans les deux cas, Watir ou Selenium, un seul pilote, Webdriver est utilisé.

Webdriver pourrait être défini comme le pilote au sens driver du terme de la pile et l’élément le plus bas de la couche. Il gère à ce jour la majorité des différents moteurs de navigateur du marché.

Au niveau de l’ordonnanceur

Sur notre ordonnanceur, rien à installer puisque c’est par un check_nrpe que va être appelé le script à exécuter sur la machine robot (Ubuntu Desktop dans mon cas).

Conclusion

La pile logicielle présentée ici n’en est qu’une parmi beaucoup d’autres. Elle présente néanmoins l’avantage de facilement s’installer sur le robot à coup de « gem install » puisque tout est en ruby et de partager une librairie commune (webdriver) avec le leader en logiciel libre sur le marché des tests dans le navigateur. De plus, rien n’est à installer sur son ordonnanceur; à condition de dédier une machine robot pour les test, ce qui paraît obligatoire (à moins que vous ayez un serveur Nagios like avec une interface Gnome ou KDE ;-) . Une page dans le wiki devrait suivre prochainement pour illustrer par l’exemple cet article ainsi qu’un article présentant le panorama complet des solutions existantes en libre pour faire de la supervision et du test de bout en bout. À suivre donc…

]]> http://www.monitoring-fr.org/2011/05/cucumber-watir-webdriver-eue/feed/ 1 Watir : du sang neuf dans les tests de sites web http://www.monitoring-fr.org/2011/02/watir-sang-neuf-tests-web/ http://www.monitoring-fr.org/2011/02/watir-sang-neuf-tests-web/#comments Tue, 15 Feb 2011 09:19:43 +0000 Olivier Jan http://www.monitoring-fr.org/?p=2387 S’il existe un domaine assez mal couvert par nos solutions de supervision libre, c’est bien celui de la mesure de la qualité d’expérience et de la performance. Dis comme ça, cela ne vous évoque pas grand chose mais si je vous parle scénario, script dans la navigateur ou end to end user experience en anglais, vous devez voir de quoi je parle.
Jusqu’à maintenant, peu d’offres sortaient du lot dans ce domaine et vous aviez le choix grosso modo entre Webinject et Selenium. Seulement Webinject, ça n’évolue plus (lire ce post) et c’est un peu pénible à scripter justement (deux fichiers remplis de XML pour chaque test). Et la charge induite sur le serveur qui lance les contrôles est loin d’être négligeable. quant à Selenium, c’est un un poil lourd même si très performant. Il restait donc à trouver quelque chose entre les deux. C’est chose faite avec mon nouveau copain Watir, programme très léger en ruby qui s’installe avec gem. Pas de souci question installation donc. Cette installation est complétée par un plugin pour Firefox, Internet Explorer et Safari histoire de pouvoir tester votre site avec les principaux moteurs de rendu des navigateurs disponibles sur le marché. Jusque là tout bon.
Ce qui m’a plu avec Watir, à l’instar de son frère de lait Cucumber, c’est l’approche utilisé pour la rédaction des scripts. Du ruby, simple à écrire et il n’y a qu’à voir la cheat sheet pour se rendre compte de la simplicité des instructions présentes. Ces instructions sont cependant suffisantes pour adresser les besoins de ce genre de tests. J’ai pas mal testé la chose en partant des exemples fournis et j’ai bien aimé le fait que tout étant en ruby, il est facile de créer son propre « framework » de tests de sites web et notamment de générer des rapports comme celui-ci.
Rapport Watir HTML

Exemple de rapport de tests HTML

Ce type de rapport me paraît clair et précis pour rendre compte de la qualité et de la performance perçue par vos utilisateurs. C’est bien ce qu’on lui demande de faire. quand vous saurez qu’il existe une interface pour enregistrer vos scripts du nom de Wet, à la Selelnium IDE, et bien vous n’aurez plus aucune excuse pour ne pas vous jeter sur ce logiciel promis à un bel avenir.

]]> http://www.monitoring-fr.org/2011/02/watir-sang-neuf-tests-web/feed/ 0 Ouverture demo.nagios-fr.org http://www.monitoring-fr.org/2009/12/ouverture-demonstration-nagios-fr-org/ http://www.monitoring-fr.org/2009/12/ouverture-demonstration-nagios-fr-org/#comments Tue, 01 Dec 2009 16:25:22 +0000 Olivier Jan http://www.nagios-fr.org/?p=893 Nous ajoutons une nouvelle planète à notre constellation de sites avec demo.monitoring-fr.org. Cette démonstration n’est pas une démonstration online de plus de Nagios car elle n’est pas basée sur l’intégration d’un maximum de plugins ou addons et que c’est la seule qui affiche ses dessous. ;-)

L’idée est que chacun puisse s’inspirer de ce que nous croyons les meilleures pratiques de configuration pour Nagios. Chaque objet de configuration est donc présenté avec l’ensemble de ces paramètres et il est possible de suivre les évolutions, améliorations qui y sont apportées. C’est une façon de présenter les plugins que nous recommandons, utilisons au quotidien, des astuces de configuration… Cette démonstration se veut donc (au moins à terme) une référence pour tout ce qui touche à la configuration de Nagios. Nous essayons de présenter cette démonstration dans une logique d’industrialisation de Nagios et il n’est donc pas question d’être exhaustif… bien au contraire. C’est ainsi que nous essayons de nous rapprocher de standard comme LSB et que nous avons donc installé l’ensemble de notre solution « Nagios Powered » dans /opt/monitor.
Parmi les points forts à découvrir sur cette démonstration, des graphiques PNP entièrement personnalisés et comprenant des tendances, l’utilisation de cucumber-nagios pour les scénarii web, une utilisation quasi exhaustive de check_mk, la supervision de Nagios avec check_multi, l’utilisation des macros Nagios dans les gabarits…
Vous pouvez vous connecter à cette démonstration avec l’identifiant « demo » et idem pour le mot de passe. L’intégralité des fichiers de configuration de cette démonstration sont disponibles eux à cette adresse : http://demo.monitoring-fr.org/projects/show/config.

Et pour la première fois, mais pas la dernière j’espère; nous nous somme fendus d’une petite vidéo introductive à cette démonstration.

Visite Guidée de la Démonstration Nagios par nagiosfr sur Vimeo.

]]> http://www.monitoring-fr.org/2009/12/ouverture-demonstration-nagios-fr-org/feed/ 0 Cucumber-nagios : Web testing 2.0 ? http://www.monitoring-fr.org/2009/11/cucumber-nagios/ http://www.monitoring-fr.org/2009/11/cucumber-nagios/#comments Thu, 05 Nov 2009 09:53:46 +0000 Olivier Jan http://www.nagios-fr.org/?p=888 Imaginez que vous puissiez superviser toutes vos applications web en décrivant en langage naturel les actions utilisateur à entreprendre pour valider le bon fonctionnement de celle-ci ! Et bien, c’est désormais possible avec ce nouveau plugin au doux nom de cucumber-nagios !

Même si le projet est encore jeune et en cours de développement, voici comment il est possible de tester un site comme www.monitoring-fr.org

Feature: www.monitoring-fr.org
It should be up
And I should be able to search for things

Scenario: Searching for things
When I visit "http://www.monitoring-fr.org"
And I fill in "q" with "nagios"
And I press "submit"
Then I should see "www.google.com"

Quand vous saurez que ce genre de scénario peut être écrit en français (non testé pour le moment) ! Ça change vraiment de ce que l’on a l’habitude de faire avec Webinject et la puissance semble au rendez-vous
Nous commençons juste à découvrir ce nouveau plugin et nous ne tarderons pas (j’espère ;-) à documenter celui-ci dans le wiki.monitoring-fr.org.
Si vous souhaitez vous lancer dans des tests, allécher que vous êtes par ses possibilités :-) , suivez la procédure d’installation fournie sur le dépôt des sources plutôt que celle fournie sur la page officielle qui ne fonctionne pas, au moins sur Ubuntu 8.0.4.

]]> http://www.monitoring-fr.org/2009/11/cucumber-nagios/feed/ 0