test

Soirée Concevoir une pyramide de tests efficaces côté BackEnd au Paris Jug

Soumis par fredericmazue le

Le Paris JUG est un groupe d'utilisateurs Java ayant pour but de réunir les acteurs du langage (professionnels, communautés open source, institutions, étudiants, enseignants...) afin d'échanger des idées et de discuter des avancées technologiques de la plateforme Java.

Le Paris JUG organise des rencontres le deuxième mardi du mois. Les réunions sont gratuites, ouvertes à tous et consistent en une présentation technique, une démonstration d'un produit, ou une table ronde. Après la réunion les participants se retrouvent généralement pour un échange informel autour d'un verre et d'un mini-buffet.

La réunion de ce mois à pour thème la construction d'une pyramide de tests efficaces côté backend.

Mardi 10 Décembre 2019
Dans les locaux de Renault Digital :
122 Avenue du Général Leclerc,
92100 Boulogne-Billancourt, France

Plus d'informations et inscriptions ici.

Panther Symfony : une bibliothèque pour explorer et tester des sites web via des navigateur réels

Soumis par fredericmazue le

La bibliothèque Panther implémente le protocole WebDriver du W3C afin de piloter des navigateurs tels que Google Chrome ou Firefox.

Panther implémente également les API BrowserKit et DomCrawler de Symfony. Cela fonctionne exactement comme un test fonctionnel pour une application Symfony, le pilotage du navigateur en plus. Panther est une bibliothèque autonome qui permet de tester n'importe quel application PHP.

Panther détecte automatiquement une installation locale de Chrome et le lance grâce à la fonctionnalité ChromeDriver de ce dernier, sans qu'il soit besoin de configurer quoi que ce soit sur la machine de test.

En mode test, Panther lance également votre application en s'appuyant sur son serveur web PHP intégré. Tout ce que le développeur a à faire est de définir ses scénarios d'exploration de site et Panther fait le reste.

Si vous testez une application Symfony, Panther étend automatiquement la classe WebTestCase, ce qui permet de créer des tests fonctionnels qui peuvent directement exécuter le kernel de votre application et accéder à tous les services existants, mais avec le support JavaScript en plus.

Panther est un projet open source, disponible sur GitHub.

Fuzzlyn : un fuzzer pour trouver des bugs dans le JIT de .NET

Soumis par fredericmazue le

Fuzzlyn est un utilitaire qui intéressera ceux qui aiment pousser dans leurs derniers retranchements les outils avec lesquels ils travaillent.

Fuzzlyn est un fuzzer qui génère avec Roselyn des programmes  C# aléatoires dans le but de trouver des bugs dans le compilateur JIT (Just In Time) de .NET

Le fuzzing (ou test à données aléatoire) est une technique pour tester des logiciels. L'idée est d'injecter des données aléatoires dans les entrées d'un programme. Si le programme échoue (par exemple en plantant ou en générant une erreur), alors il y a des défauts à corriger. (Wikipedia)

Dans le cas de Fuzzlyn, les données aléatoires sont donc des programmes aléatoires qui sont les entrées du programme à tester qu'est le JIT .NET.

Au fait pourquoi tester le JIT de .NET et non le compilateur Roselyn lui-même ? Parce que ce dernier fait peu d'optimisations au moment de la compilation. Il y a donc peu de chances de trouver des bugs en son sein. En revanche le compilateur JIT effectue d'importantes opérations d'optimisation, et c'est à priori là que les bugs préféreront venir se nicher. Ce genre de bugs se manifestera par un résultat du programme différent selon qu'il s'exécute en mode 'debug' (non optimisé) ou en mode 'release'.

On lance Fuzzlyn en lui demandant par exemple de générer un million de programmes (= 1 million d'entrées aléatoires pour le JIT.NET)

dotnet fuzzlyn.dll --num-programs 1000000

On fait chauffer son café et on attend que Fuzzlyn génère ce million de programmes en exécutant chacun d'eux en mode debug et release et signale les cas qui produisent une sortie différente.

Fuzzlyn est un projet open source, disponible sur GitHub.

Sur la page du projet sont présentés quelques bugs qui ont été trouvés avec Fuzzlyn. Par exemple :

// Generated by Fuzzlyn on 2018-06-03 16:17:09
// Seed: 10744458083861091494
// Reduced from 21.3 KB to 0.2 KB
// Debug: Outputs '246'
// Release: Outputs '4294967286'

public class Program
{
    static sbyte s_1 = -10;
    public static void Main()
    {
        ulong vr44 = (byte)(0U ^ s_1);
        System.Console.WriteLine(vr44);
    }
} 

ou bien

// Generated by Fuzzlyn on 2018-06-03 16:15:22
// Seed: 10187462581749713401
// Reduced from 186.5 KB to 0.2 KB
// Debug: Runs successfully
// Release: Throws 'System.DivideByZeroException'

public class Program
{
   public static void Main()
   {
       var vr219 = 'N' % ((35815 / M1(new ushort[]{65535})) | 1);
   }

   static ushort M1(ushort[] arg2)
   {
       return arg2[0];
   }
}

WinAppDriver UI Recorder : un outil open source pour créer des tests automatisés d'interfaces utilisateur pour Windows 10

Soumis par fredericmazue le
Image

WinAppDriver est un service d'automatisation de l'interface utilisateur de Windows 10. Les développeurs peuvent utiliser ce service pour tester leurs applications. Pour cela l'outil le plus utilisé est Inspect.

Toutefois cet outil ne s'avère pas suffisant  lorsqu'il s'agit de prendre en charge des scénarios spécifiques à l'automatisation de l'interface utilisateur, tels que la génération de requêtes XPath, indique Microsoft dans le billet qui présente WinAppDriver UI Recorder.

WinAppDriver UI Recorder touvera son utilité dans les deux scénarios suivants :

1) Inspecter les éléments de l'interface utilisateur et récupérer leurs expressions XPath

2) Générer du code C # pour certaines actions (clic de souris) lorsque "Enregistrer" est actif. Le code généré peut être collé dans le dossier du modèle d'enregistreur d'interface utilisateur pour la lecture de WinAppDriver

L'outil UI Recorder vise à fournir une interface utilisateur intuitive et simpliste, divisée en deux panneaux, comme indiqué ci-dessous:

UI Recorder suit les interactions du clavier et de la souris avec une interface d'application représentant une action de l'interface utilisateur. Lorsque l'enregistrement est actif, les panneaux supérieurs et inférieurs sont mis à jour dynamiquement chaque fois qu'une nouvelle action d'interface utilisateur a lieu. Le panneau supérieur affiche la requête XPath générée pour l'élément d'interface utilisateur actuellement sélectionné, et le panneau inférieur affiche les informations XML brutes pour le même élément. Vous pouvez accéder à l'onglet Code C # dans le panneau inférieur pour afficher le code C # généré de l'action enregistrée que vous pouvez utiliser sur un test WinAppDriver.

Le code enregistré peut être copié dans le presse-papiers et collé sur le projet de modèle WinAppDriver UI Recorder à rejouer.

WinAppDriver UI Recorder est open source, sous licence, MIT, disponible sur GitHub.

 

Journée Française des Tests Logiciels 2018

Soumis par fredericmazue le

Le CFTL organise la 10ème édition de la Journée Française des Tests Logiciels (JFTL) 2018, le grand rassemblement des professionnels du test logiciel et de la qualité des systèmes d’information en France.

Cet événement a su s‘imposer au fil des années comme le rendez-vous fédérateur de la communauté française des tests logiciels. En effet, avec plus de 1 000 participants l’année dernière, 43 sponsors et 16 conférences thématiques mettant à l’honneur les témoignages de grands comptes et organisations, la JFTL est aujourd’hui un lieu d’échanges privilégié de l’ensemble des acteurs de ce marché, qui peuvent à cette occasion, rencontrer les experts les plus reconnus du secteur et échanger leurs expériences entre professionnels.

La veille (le lundi 9 avril 2018) une journée de tutoriels est organisée pour les professionnels souhaitant approfondir leurs connaissances des bonnes pratiques du test : test agile, test des applications mobiles, automatisation des tests, TMMi, modélisation des processus métier pour le test, passage des exigences aux tests et model-based testing, tests de sécurité et tests de performance, etc. Une équipe de formateurs expérimentés, praticiens reconnus dans le domaine des tests logiciels, proposeront des enseignements pratiques sur les thématiques essentielles du test.

Date : 10 avril 2018 de 08h00 à 18h00

Lieu : Beffroi de Montrouge – 2, place Émile-Cresp – 92121 Montrouge

CA Technologies et Sogeti organisent le 3ème Hackatest dédié au Model-Based Testing

Soumis par fredericmazue le

CA Technologies et Sogeti renouvellent leur partenariat en organisant le 3ème Hackatest dédié au Model-Based Testing (MBT) le 13 mars 2018.

Le Model-Based Testing est une approche de génération des cas de tests optimum sur la base d’une modélisation graphique. Du fait de l’accélération des projets, cette approche va devenir prédominante pour toutes les activités de tests logiciels dans les entreprises.

Ce Hackatest s’adresse aux testeurs, aux architectes fonctionnels, aux chefs de projets et aux test managers qui seront accompagnés toute la journée par des experts de CA Technologies et Sogeti. Les participants pourront expérimenter de nouvelles pratiques de modélisation, celles à adopter et les écueils à éviter. Ils pourront aussi tester les nouvelles pratiques de modélisation plus simples et plus rapides pour s’adapter aux enjeux des développements agiles et des approches « Test Driven ». Ils seront jugés sur l’exactitude de leur modèle ainsi que sur le nombre et le taux de couverture des tests.

Cette initiative s’inscrit dans la volonté de CA Technologies d’accompagner les entreprises dans le cadre de leur processus DevSecOps pour améliorer leur réussite dans l’économie numérique et in fine, améliorer l’expérience client.  En effet, comme le révèle une récente étude « La sécurité dans l’ADN du cycle de vie des logiciels »,  88 % des personnes interrogées en France considèrent comme indispensable d’intégrer la sécurité plus tôt dans le cycle de développement des applications via cette approche.

Inscription à l’Hackatest : bit.ly/2DD27FS

Date : le 13 mars 2018, de 10h00 à 17h00

Dans les locaux de CA Technologies
Tour Opus 12
4 place de la.Pyramide, Paris La Défense

NI dévoile LabVIEW, nouvelle génération

Soumis par fredericmazue le

NI annonce le lancement de LabVIEW NXG 1.0, la première version du logiciel de conception de systèmes LabVIEW, nouvelle génération.

LabVIEW NXG comble l'écart entre les logiciels configuratifs et les langages de programmation personnalisés en proposant une nouvelle approche de l'automatisation des mesures, qui permet aux experts de se consacrer aux véritables problèmes scientifiques et techniques plutôt qu'à la configuration de leurs outils.

« Il y a trente ans, nous avons lancé la toute première version de LabVIEW dans l'optique d'aider les ingénieurs à automatiser leurs systèmes de mesure sans avoir besoin d'entrer dans les arcanes des langages de programmation traditionnels. LabVIEW représentait la méthode "sans programmation" », confie Jeff Kodosky, cofondateur de NI et expert émérite en Stratégies & Technologies, plus connu comme le "père de LabVIEW". « Longtemps nous avons entrepris d'élargir le champ d'action de LabVIEW plutôt que de poursuivre nos objectifs premiers, c'est-à-dire d'aider les ingénieurs à automatiser leurs mesures rapidement et simplement. Aujourd'hui, LabVIEW NXG remédie clairement à ce constat, puisque cette nouvelle mouture a été entièrement repensée autour du concept de flux de développement unifié. L'approche configurative servira les applications les plus communes, tandis que les plus complexes pourront tirer partie de la liberté de programmation qu'offre le langage graphique LabVIEW. »

Avec un nouveau flux de développement qui leur permet d'acquérir et d'analyser à répétition des données de mesures sans programmation, la version 1.0 de LabVIEW NXG apporte un véritable gain de productivité aux ingénieurs chargés d'effectuer des mesures sur table, souligne l'éditeur. Ces flux de développement sans programmation simplifient l'automatisation en élaborant le code nécessaire "en sous-main". Les ingénieurs peuvent par exemple glisser et déposer en un seul geste une section de code équivalente à 50 lignes de code textuel – et ce n'est que l'une des possiblités qu'offre LabVIEW NXG pour les aider à se consacrer à l'innovation sans se préoccuper de l'implémentation.

LabVIEW NXG intègre un éditeur entièrement remanié, qui présente des fonctionnalités souvent requises par les utilisateurs LabVIEW chevronnés, tout en garantissant une expérience utilisateur similaire aux logiciels complémentaires du marché. Ce nouvel éditeur élargit encore la compatibilité de LabVIEW avec d'autres langages. Il assure un gain de productivité en optimisant les micro-interactions, les objets vectorisés de l'interface utilisateur et la qualité des fonctions de zoom. 

Si LabVIEW NXG 1.0 bouscule les codes de la mesure sur table, de son côté LabVIEW 2017 cible le développement, le déploiement et la gestion d'applications embarquées et de test distribuées, sophistiquées et de grande envergure. Ses fonctionnalités améliorent l'intéropérabilité avec les IP et les protocoles de communication standard de type IEC 61131-3, OPC UA ou encore la norme d'échange de données DDS.

LabVIEW NXG 1.0 et LabVIEW 2017 sont tous deux disponibles dès l'achat de l'une des deux versions, que l’on soit nouveau client LabVIEW ou que l’on dispose d'un contrat de services actif depuis plusieurs années. Ces deux versions de LabVIEW incarnent la volonté de NI d’aider les ingénieurs responsables de développer des applications de test, de mesure et de contrôle/commande en leur permettant d'accéder rapidement aux informations sur leur matériel et au renseignements tirées des données qu'ils acquièrent.

Reposant sur plus de trente ans d'expérience dans le domaine du logiciel, la première version de LabVIEW, nouvelle génération, sera la première d'une longue série de lancements qui étendront rapidement les capacités des outils d'ingénierie utilisés du stade de la conception au test en production. Des applications d'acquisition de données les plus simples aux systèmes de test les plus sophistiqués, LabVIEW permet d'accélérer la mise sur le marché des produits en augmentant la productivité des ingénieurs.

Pour en savoir plus sur LabVIEW NXG 1.0 et LabVIEW 2017, rendez-vous sur www.ni.com/labview.

Une étude réalisée par Wipro a révélé une augmentation de 85 % de l'automatisation des tests

Soumis par admin le

D'après une étude menée par Wipro Limited, l'automatisation des tests a fait un bond de 85 %, tous secteurs confondus, les entreprises cherchant à s'adapter à l'évolution du paysage technologique. L'étude, intitulée « State of Quality 2016 », a été réalisée par la division Testing Services de Wipro sur une période de neuf mois à l'aide d'outils d'analyse, et avait pour objectif d'identifier les grandes tendances en matière de test logiciel. Elle a également révélé que près de 73 % des tests de performance incluaient des tests d'applications web.

L'étude s'appuie sur les informations collectées dans le cadre des missions de test et d'assurance qualité (QA) et des missions de conseil et de consulting effectuées par Wipro, ainsi que sur les commentaires recueillis sur les médias sociaux. Les données collectées englobent les secteurs banque, services financiers et assurance (BFSI), vente de détail et biens de consommation, santé et sciences de la vie, high-tech et industrie, médias et télécommunications, et services aux collectivités, aux États-Unis, au Canada, en Europe et en Asie.

L'étude se concentre sur les cinq piliers des missions de test et d'assurance qualité (QA) :

  • Automatisation
  • Ingénierie de la performance
  • Gestion des données de test et de l'environnement de test
  • Expérience client final (applications mobiles)
  • Ingénierie qualité

Arun Melkote, Responsable mondial -Testing Services chez Wipro Limited, a déclaré : « Wipro est reconnu comme un leader de l'ingénierie et l'assurance qualité. Le rapport « State of Quality 2016 » permet de se confronter à la réalité sur la qualité des logiciels dans le monde. Avec cette étude, nous avons tenté de constater l'écart entre "la pensée" et "l'action" et d'identifier les principales difficultés du secteur, ainsi que leurs solutions. »

Hiral Chandrana, Vice-président senior et Responsable mondial, Business Application Services chez Wipro Limited, a confié : « Les applications sont au cœur de l'entreprise numérique, et avec les besoins métiers qu'engendrent des technologies comme le cloud, l'analytics et la mobilité, les tests logiciels ont évolué pour devenir une discipline d'ingénierie qualité et d'assurance qualité, assurant ainsi une expérience informatique résiliente et fluide au sein des entreprises. La division Testing Services de Wipro mène à bien cette transformation en utilisant des plateformes innovantes de nouvelle génération, notamment AssureNXT et IntelliAssure. IntelliAssure est une plateforme d'intelligence artificielle dédiée à l'ingénierie et aux tests qualité et développée par la HOLMES Artificial Intelligence Platform™ de Wipro. "State of Quality 2016" est le premier d'une série de rapports qui seront publiés annuellement. »

Quelques-unes des principales conclusions de l'étude « State of Quality 2016 » :

  • L'automatisation ouvre la voie : L'étude a révélé une augmentation de 85 % de l'automatisation des tests sur une période de deux ans, tous secteurs confondus. Cette hausse est alimentée par les outils open source, facilement accessibles sur le marché de nos jours.
  • Les applications web dominent les tests de performance : Avec la digitalisation croissante des entreprises, les applications web arrivent en tête des plateformes nécessitant des tests de performance : près de 73 % des tests de performances comprennent des tests d'applications web.
  • Un intérêt moindre pour l'ingénierie de performance : L'ingénierie de performance (Performance Engineering ou PE) garantit un développement axé sur la performance tout au long du cycle de développement du logiciel et pas uniquement au cours de la phase de test (Performance Testing). Nous avons fait une observation importante dans ce domaine : seulement 30 % des entreprises clientes ont montré un intérêt marqué pour l'ingénierie de performance et possèdent les talents nécessaires pour tirer bénéfice des outils de gestion des processus d'automatisation. Ce faible pourcentage est dû au prix élevé de la gamme d'outils, à la pénurie de talents qualifiés et à l'introduction tardive des tests de performance durant le cycle de développement des systèmes.
  • Pas de réels amateurs de la gestion de l'environnement de test et des données de test : Les technologies de virtualisation, mobiles et cloud ont eu un impact considérable sur la gestion de l'environnement de test (Test Environment Management ou TEM) et la gestion des données de test (Test Data Management ou TDM) au cours des dix dernières années. La plupart des entreprises éprouvent des difficultés à s'y adapter, devant déjà faire face à des exigences métier en constante évolution. Le nombre d'anomalies dans les missions de test approche ainsi les 13 %, du fait de problèmes liés à l'environnement de test logiciel ; la résolution de ces problèmes accapare 28 % des efforts de l'équipe de test.

Fait intéressant, 90 % des entreprises sont préoccupées par la génération de données de test, un élément essentiel pour une exécution réussie des applications, qu'elles soient nouvelles ou révisées. De même, 25 à 30 % des scénarios de test restent non testés en l'absence de solution complète de masquage des données.

  • L'expérience client final fait apparaître la nécessité d'investissements accrus dans l'ingénierie et les tests qualité : D'après une analyse des commentaires recueillis sur les médias sociaux et portant sur 30 applications mobiles en Amérique du Nord et en Europe dans les secteurs de la vente de détail et de la banque, 59 % des utilisateurs finaux ne sont pas satisfaits de leurs applications en termes de stabilité, d'interopérabilité et de maniabilité. Les utilisateurs d'applications bancaires en Europe ont exprimé des inquiétudes quant à la sécurité de ces applications. Ceci montre la nécessité croissante d'une ingénierie et de tests qualité.
  • Intérêt croissant pour l'ingénierie qualité: Les tests logiciels évoluent de plus en plus, passant de la simple détection à la prévention d'anomalies. Par conséquent, 66 % des organisations utilisent actuellement des développeurs logiciels bancs de test (Software Developers in Test ou SDET) en collaboration avec des testeurs traditionnels pour tous leurs projets, s'assurant ainsi un développement de qualité et d'éviter les anomalies dès l'étape de création. Cette tendance est le signe d'une orientation vers l'ingénierie qualité : une gestion, un développement, un fonctionnement et une maintenance des systèmes informatiques et des architectures des entreprises avec des normes de qualité élevées.

Le rapport « State of Quality 2016 » est téléchargeable ici.

Microsoft ouvre Visual Studio Test Platform

Soumis par fredericmazue le
Image

Un billet de Microsoft annonce l'ouverture de Visual Studio Test Platform, couramment appelée VS Test.

VS Test est une plateforme extensible qui lance des tests, collecte les données de diagnostic et génère des rapports. Elle supporte les tests en provenances de nombreux framexorks de test grâce à un modèle d'adaptateur pluggable. Les adaptateurs communiquant avec la plate-forme VS Test au moyen d'une API exposée par celle-ci.

VS Test est utilisé au sein de Visual Studio, et le sera prochainement au sein de Visual Studio Code.

Le diagramme ci-dessous, qui décrit le déroulement d'un test effectué via cette plate-forme, met en évidence les composants que Microsoft à ouverts : ce sont les composants qui apparaissent en jaune.

VS Test est sur GitHub.

Compuware dévoile sa nouvelle solution Topaz For Total Test

Soumis par fredericmazue le

Compuware Corporation annonce aujourd’hui la disponibilité de Topaz for Total Test, une solution mainframe qui introduit les tests unitaires de type Java dans le monde des applications COBOL.

En permettant même aux développeurs débutants de tester et de valider immédiatement toute modification  apportée aux applications COBOL existantes, Topaz for Total Test veut prouver que de telles applications en code Cobol, peuvent être mises à jour aussi souvent et avec la même fiabilité que les autres, souligne l'éditeur.

En mettant à la disposition des développeurs d’applications COBOL une solution de tests unitaires rapide et facile à manier, Topaz for Total Test veut également permettre aux entreprises d’améliorer l’expérience client, celle-ci dépendant des processus informatiques Agile/DevOps multiplateformes, du mainframe au Cloud.

Les développeurs, quel que soit leur niveau de compétence, peuvent ainsi réaliser rapidement et facilement des tests unitaires pour des programmes COBOL comme ils le feraient en Java, PHP et dans d’autres langages de programmation.

Plus d'informations : Topaz for Total Test