Tests

Test Run Hub : disponible dans Azure Test

Soumis par francoistonic le

Test Run Hub est là pour gérer les tests sur Azure DevOps Test / Azure Test. Il s'agit d'un conteneur pour capturer l'exécution des cas de tests. Il doit permettre de mieux monitorer la qualité, identifier plus rapidement les problèmes et maintenir un historique des tests. 

Ce nouveau hub donne aux équipes de nombreux éléments :

- une visibilité en temps réel des tests et de leurs exécutions

- une analyse profonde des données récupérées durant les tests

- réduire l'effort d'administration des tests

- amélioration la collaboration dans les équipes, partager les copies d'écran, les données

- programmatique pour automatiser et intégrer

Le service est maintenant en disponibilité générale : https://devblogs.microsoft.com/devops/the-new-test-run-hub-is-going-generally-available/

Pest : le framework de tests pour PHP revient en version 4

Soumis par francoistonic le

Pest est un framework de tests pour PHP parmi les plus connus de la communauté. Une des nouveautés les plus importantes est la possibilité de tester nativement dans le navigateur. Il s'agit d'une fonctionnalité essentielle dans le développement web pour assurer le bon fonctionnement des projets. Cette fonctionnalité devrait faciliter le travail des développeurs en testant sur un vrai navigateur. Laravel est une des priorités de ce support. Chrome, Safari et Firefox sont supportés. Vous pouvez interagir, capturer le debug, faire une pause. Pour utiliser cette fonction, ii faut l'activer : 

composer require pestphp/pest-plugin-browser --dev npm install playwright@latestnpx playwright install

Pest v4 introduit le test sharding. Cela permet de découper les tests en des éléments plus petits et plus faciles à gérer et à exécuter. Cette fonction est conseillée pour des tests dans votre chaîne CI. 

Pest promet aussi une couverture de typage plus rapide. Autre nouveauté : le Profanity Checking. Elle permet de nettoyer le code de tout commentaire grossier. Cette v4 est construit sur PHPUnit 12. 

Annonce et détails : https://pestphp.com/docs/pest-v4-is-here-now-with-browser-testing

Tests logiciels : Les erreurs qui coûtent cher et comment les éviter

Soumis par francoistonic le

Aujourd’hui, dans la plupart des organisations, les tests automatisés sont considérés comme une évidence. Ils font partie intégrante du cycle de développement logiciel, et sont exécutés à chaque modification, chaque mise à jour, chaque livraison. Pourtant, derrière cette apparente rigueur se cache un paradoxe : les tests prennent souvent bien plus de place et de ressources que nécessaire.

Cloudbees livre des clés pour optimiser ses pratiques de test sans compromettre la qualité.

Avis d'expert.

Le poids réel des tests... que l’on n’ose pas toujours regarder

Sur le papier, automatiser les tests est une bonne pratique. Dans les faits, c’est souvent mal calibré. Trop de tests sont lancés « par défaut », sans distinction entre ce qui est critique, utile ou totalement inutile. Cela entraîne des délais de build qui s’allongent artificiellement, une infrastructure mobilisée excessivement pour rien et un ralentissement de toute la chaîne de livraison. De telles inefficacités qui s’empilent et se répètent deviennent donc des enjeux stratégiques pour les entreprises.

Tester moins, mais tester mieux

La solution n’est pas de réduire la couverture des tests, mais de revoir la manière dont ils sont déclenchés, organisés et pilotés. Aujourd’hui, il existe des approches très concrètes qui permettent de rendre les tests plus efficaces, en commençant par analyser l’impact des changements. Il est en effet inutile de relancer l’ensemble des tests si seules quelques zones du code sont concernées. CloudBees Unify, par exemple, s’appuie sur l’IA et l’analyse d’impact pour identifier automatiquement les tests réellement pertinents, critiques et ainsi éviter les redondances.

Il importe également d’établir une priorité de manière à ce que les tests les plus stratégiques tels que ceux concernant la sécurité et la conformité, soient exécutés avant les autres. Cette orchestration intelligente, en plus d’être une garantie de qualité, permet de libérer des ressources pour favoriser l’innovation. Enfin, il est indispensable d’utiliser des outils efficaces, capables d’identifier ce qui fonctionne… et ce qui coûte afin de mettre en œuvre des actions de rationalisation.

Cependant, ce type d’optimisation demande du temps, de l’expertise et des outils adaptés. Ce n’est pas à chaque équipe de réinventer la roue. C’est pourquoi il est souvent pertinent de s’appuyer sur des solutions ou des partenaires spécialisés, qui permettent d’obtenir des résultats rapides, mesurables, et durables.

À titre d’exemple, un client de CloudBees a divisé par 6 le temps d’exécution de ses tests (48 minutes contre 300 auparavant) en ne ciblant que ceux qui ont une réelle utilité. En s’appuyant sur une solution spécialisée d’analyse de l’impact des changements, ce sont plus de 8500 heures d’infrastructure par mois qui ont ainsi été économisées, sans sacrifier la qualité. 

Des petits ajustements… pour des gains énormes

Ce qui peut sembler marginal à l’échelle d’un seul pipeline devient stratégique lorsqu’on regarde l’ensemble d’une organisation. Réduire de quelques minutes chaque cycle de test, éliminer les doublons, mieux cibler les tests exécutés : ces actions, répétées des centaines ou milliers de fois, représentent des gains colossaux. Et pas seulement en budget : moins de tests inutiles, c’est aussi moins de charge mentale pour les équipes, moins d’attente entre deux cycles, une meilleure réactivité aux bugs et même une réduction de l’empreinte énergétique de la DSI. On parle ici de performance… et de durabilité. 

Optimiser les tests, c’est une stratégie

Les entreprises qui prennent ce sujet au sérieux ne le font pas seulement pour aller plus vite. Elles le font parce qu’elles savent que le testing est un levier commercial à part entière. Trop souvent invisible, c’est un domaine qui, s’il est bien piloté, libère des ressources et permet de gagner en rapidité… et en sérénité. Alors plutôt que de tester « tout, tout le temps », il est peut-être temps de ne tester que ce qu’il faut, au bon moment, et quand c’est possible, de confier cette l’orchestration de ce travail à une solution experte comme CloudBees, qui permet de concilier vitesse, qualité et conformité à l’échelle de l’entreprise.

LambdaTest lance SmartUI SDK

Soumis par fredericmazue le

LambdaTest, une plate-forme de tests unifiés basée sur le cloud, annonce le lancement de sa solution SmartUI SDK. Il s'agit d'un outil qui veut simplifier les tests de régression visuelle pour ses utilisateurs en leur permettant de trouver en un clic les erreurs de régression visuelle de l’interface utilisateur à l’aide de Smart Testing.

SmartUI SDK s’intègre aux suites de tests existantes et transforme l’approche des tests de régression visuelle. Cette solution permet aux utilisateurs de saisir, comparer et analyser sans effort des captures d’écran sur divers navigateurs et résolutions, assurant une couverture et une précision complètes dans les opérations d'essais visuels.

Pour d'information sur SmartU SDK ici : lambdatest.com/support/docs/smartui-selenium-js-sdk

Microsoft a amélioré ses outils de couverture de code

Soumis par fredericmazue le

Pour mémoire, la couverture de code est une mesure utilisée pour décrire le taux de code source exécuté d'un programme quand une suite de tests est lancée. Plus la couverture de code d'un programme est élevée, plus grande est sa quantité de code exécuté et donc à priori moindre est le risque que des bugs y subsistent. Microsoft a annoncé avoir amélioré ses deux outils de couverture de code Microsoft.CodeCoverage et dotnet-coverage avec des 'fonctionnalités fantastiques'. Le terme est de Microsoft.

Plus raisonnablement, nous remarquons tout d'abord que les deux outils peuvent fonctionner sur n'importe quelle plateforme prise en charge par .NET, grâce à l'ajout d'une instrumentation statique.

Nous remarquons aussi la réorganisation des formats de rapport de couverture de code pour les intégrer facilement à des outils tels que ReportGenerator. Deux formats de rapports à base de XML ont été ajoutés.

Nous remarquons encore que dotnet-coverage est désormais capable de fusionner des rapports de couverture.

Enfin Microsoft a résolu un problème de performances dans Microsoft.CodeCoverage qui bénéficie ainsi d'un gain de 80% de rapidité, selon Redmond.

WebStorm 2023.1

Soumis par fredericmazue le
Image

JetBrains a annoncé la disponibilité d'une nouvelle version de son IDE dédié au développement Web : WebStorm 2023.1. La nouveauté majeure est la prise en charge du framework Astro. Le plugin Astro fournit les fonctionnalités de base comme la mise en évidence de la syntaxe, la complétion de code avec importations automatiques, des refactorisations, la navigation, le formatage, entre autres.

A remarquer encore, la prise en charge de TypeScript dans les modèles Vue. Une autre amélioration spécifique à Vue mérite d'être mentionnée : vous bénéficiez désormais de la saisie semi-automatique du code pour vos événements de composants personnalisés dans les modèles Vue. Cela fonctionne de façon identique pour JavaScript et TypeScript.

A remarquer aussi, l'ajout des importations de composants lors du copier-coller. Ainsi lorsque vous copiez-collez du code d'un fichier à un autre, WebStorm ajoute automatiquement toutes les importations requises.

C'était auparavant le cas pour les langages JavaScript et TypeScript purs et les modèles React. Dans WebStorm 2023.1, cela fonctionne désormais aussi pour les modèles Vue, Svelte, Astro et <0>Angular. WebStorm 2023.1 inclut la prise en charge des principales fonctionnalités de la version TypeScript 5.0.

WebStorm bénéficie aussi des améliorations de l'interface utilisateur présentées avec IntelliJ IDEA 2023.1 : mode compact, mode zoom, vérification des commits en arrière-plan, etc.

Toutes les nouveautés de WebStorm 22023.1 sont récapitulées dans ce billet de JetBrains.

API Fortress propose désormais la génération de tests fonctionnels de masse

Soumis par fredericmazue le

API Fortress est une plate-forme de test continu d'API. API a annoncé la génération de tests fonctionnels de masse. Cette nouvelle fonctionnalité permet aux utilisateurs d'importer des fichiers OpenAPI et de générer un grand nombre de tests fonctionnels pour ces fichiers. Le générateur de test est actuellement en version bêta et une version de disponibilité générale est attendue fin janvier 2020.

A remarquer : les tests fonctionnels générés via la génération de tests fonctionnels de masse peuvent être facilement réutilisés comme moniteurs et tests de charge.

Pour l'occasion, Patrick Poulin , PDG et cofondateur d'API Fortress,  a déclaré à Newswire : Avec plus de 95% des vulnérabilités d'API causées par une erreur humaine ou une erreur fonctionnelle, il est très important de tester toutes les API avant de les publier, puis de les surveiller avec les mêmes tests fonctionnels. Alors que de plus en plus d'entreprises accélèrent les versions et incorporent des pipelines CI / CD automatisés, la détection et la correction des erreurs fonctionnelles avant leur publication sont plus importantes que jamais.

Site : apifortress.com

Une étude réalisée par Wipro a révélé une augmentation de 85 % de l'automatisation des tests

Soumis par admin le

D'après une étude menée par Wipro Limited, l'automatisation des tests a fait un bond de 85 %, tous secteurs confondus, les entreprises cherchant à s'adapter à l'évolution du paysage technologique. L'étude, intitulée « State of Quality 2016 », a été réalisée par la division Testing Services de Wipro sur une période de neuf mois à l'aide d'outils d'analyse, et avait pour objectif d'identifier les grandes tendances en matière de test logiciel. Elle a également révélé que près de 73 % des tests de performance incluaient des tests d'applications web.

L'étude s'appuie sur les informations collectées dans le cadre des missions de test et d'assurance qualité (QA) et des missions de conseil et de consulting effectuées par Wipro, ainsi que sur les commentaires recueillis sur les médias sociaux. Les données collectées englobent les secteurs banque, services financiers et assurance (BFSI), vente de détail et biens de consommation, santé et sciences de la vie, high-tech et industrie, médias et télécommunications, et services aux collectivités, aux États-Unis, au Canada, en Europe et en Asie.

L'étude se concentre sur les cinq piliers des missions de test et d'assurance qualité (QA) :

  • Automatisation
  • Ingénierie de la performance
  • Gestion des données de test et de l'environnement de test
  • Expérience client final (applications mobiles)
  • Ingénierie qualité

Arun Melkote, Responsable mondial -Testing Services chez Wipro Limited, a déclaré : « Wipro est reconnu comme un leader de l'ingénierie et l'assurance qualité. Le rapport « State of Quality 2016 » permet de se confronter à la réalité sur la qualité des logiciels dans le monde. Avec cette étude, nous avons tenté de constater l'écart entre "la pensée" et "l'action" et d'identifier les principales difficultés du secteur, ainsi que leurs solutions. »

Hiral Chandrana, Vice-président senior et Responsable mondial, Business Application Services chez Wipro Limited, a confié : « Les applications sont au cœur de l'entreprise numérique, et avec les besoins métiers qu'engendrent des technologies comme le cloud, l'analytics et la mobilité, les tests logiciels ont évolué pour devenir une discipline d'ingénierie qualité et d'assurance qualité, assurant ainsi une expérience informatique résiliente et fluide au sein des entreprises. La division Testing Services de Wipro mène à bien cette transformation en utilisant des plateformes innovantes de nouvelle génération, notamment AssureNXT et IntelliAssure. IntelliAssure est une plateforme d'intelligence artificielle dédiée à l'ingénierie et aux tests qualité et développée par la HOLMES Artificial Intelligence Platform™ de Wipro. "State of Quality 2016" est le premier d'une série de rapports qui seront publiés annuellement. »

Quelques-unes des principales conclusions de l'étude « State of Quality 2016 » :

  • L'automatisation ouvre la voie : L'étude a révélé une augmentation de 85 % de l'automatisation des tests sur une période de deux ans, tous secteurs confondus. Cette hausse est alimentée par les outils open source, facilement accessibles sur le marché de nos jours.
  • Les applications web dominent les tests de performance : Avec la digitalisation croissante des entreprises, les applications web arrivent en tête des plateformes nécessitant des tests de performance : près de 73 % des tests de performances comprennent des tests d'applications web.
  • Un intérêt moindre pour l'ingénierie de performance : L'ingénierie de performance (Performance Engineering ou PE) garantit un développement axé sur la performance tout au long du cycle de développement du logiciel et pas uniquement au cours de la phase de test (Performance Testing). Nous avons fait une observation importante dans ce domaine : seulement 30 % des entreprises clientes ont montré un intérêt marqué pour l'ingénierie de performance et possèdent les talents nécessaires pour tirer bénéfice des outils de gestion des processus d'automatisation. Ce faible pourcentage est dû au prix élevé de la gamme d'outils, à la pénurie de talents qualifiés et à l'introduction tardive des tests de performance durant le cycle de développement des systèmes.
  • Pas de réels amateurs de la gestion de l'environnement de test et des données de test : Les technologies de virtualisation, mobiles et cloud ont eu un impact considérable sur la gestion de l'environnement de test (Test Environment Management ou TEM) et la gestion des données de test (Test Data Management ou TDM) au cours des dix dernières années. La plupart des entreprises éprouvent des difficultés à s'y adapter, devant déjà faire face à des exigences métier en constante évolution. Le nombre d'anomalies dans les missions de test approche ainsi les 13 %, du fait de problèmes liés à l'environnement de test logiciel ; la résolution de ces problèmes accapare 28 % des efforts de l'équipe de test.

Fait intéressant, 90 % des entreprises sont préoccupées par la génération de données de test, un élément essentiel pour une exécution réussie des applications, qu'elles soient nouvelles ou révisées. De même, 25 à 30 % des scénarios de test restent non testés en l'absence de solution complète de masquage des données.

  • L'expérience client final fait apparaître la nécessité d'investissements accrus dans l'ingénierie et les tests qualité : D'après une analyse des commentaires recueillis sur les médias sociaux et portant sur 30 applications mobiles en Amérique du Nord et en Europe dans les secteurs de la vente de détail et de la banque, 59 % des utilisateurs finaux ne sont pas satisfaits de leurs applications en termes de stabilité, d'interopérabilité et de maniabilité. Les utilisateurs d'applications bancaires en Europe ont exprimé des inquiétudes quant à la sécurité de ces applications. Ceci montre la nécessité croissante d'une ingénierie et de tests qualité.
  • Intérêt croissant pour l'ingénierie qualité: Les tests logiciels évoluent de plus en plus, passant de la simple détection à la prévention d'anomalies. Par conséquent, 66 % des organisations utilisent actuellement des développeurs logiciels bancs de test (Software Developers in Test ou SDET) en collaboration avec des testeurs traditionnels pour tous leurs projets, s'assurant ainsi un développement de qualité et d'éviter les anomalies dès l'étape de création. Cette tendance est le signe d'une orientation vers l'ingénierie qualité : une gestion, un développement, un fonctionnement et une maintenance des systèmes informatiques et des architectures des entreprises avec des normes de qualité élevées.

Le rapport « State of Quality 2016 » est téléchargeable ici.

Compuware dévoile sa nouvelle solution Topaz For Total Test

Soumis par fredericmazue le

Compuware Corporation annonce aujourd’hui la disponibilité de Topaz for Total Test, une solution mainframe qui introduit les tests unitaires de type Java dans le monde des applications COBOL.

En permettant même aux développeurs débutants de tester et de valider immédiatement toute modification  apportée aux applications COBOL existantes, Topaz for Total Test veut prouver que de telles applications en code Cobol, peuvent être mises à jour aussi souvent et avec la même fiabilité que les autres, souligne l'éditeur.

En mettant à la disposition des développeurs d’applications COBOL une solution de tests unitaires rapide et facile à manier, Topaz for Total Test veut également permettre aux entreprises d’améliorer l’expérience client, celle-ci dépendant des processus informatiques Agile/DevOps multiplateformes, du mainframe au Cloud.

Les développeurs, quel que soit leur niveau de compétence, peuvent ainsi réaliser rapidement et facilement des tests unitaires pour des programmes COBOL comme ils le feraient en Java, PHP et dans d’autres langages de programmation.

Plus d'informations : Topaz for Total Test

 

Projet Google Wycheproof : une suite d'outils de tests cryptographiques

Soumis par fredericmazue le

Implémenter des algorithmes cryptographiques, ou de chiffrement, complexes n'est pas une mince affaire. Des erreurs subtiles peuvent avoir de lourdes conséquences pour la sécurité souligne Google dans un billet qui annonce son nouveau projet : Wycheproof.

Google a mis au travail ses cryptographes éminents, qui ont étudié les techniques d'attaques courantes pour constituer un ensemble de tests unitaires applicables sur les implémentations des algorithmes de chiffrement les plus répandus : AES-EAX, AES, GCM, DH, DHIES, DSA, ECDH, ECDSA ECIES, RSA.

Le projet Wycheproof a vocation à s'enrichir de nouveaux tests, et Google fait appel aux contributeurs pour cela. Toutefois les tests déjà mis au point par Google semblent efficaces, puisque Mountain View assure avoir découvert grâce à eux 40 failles, dont la possibilité de récupérer des clés privées sur des implémentations DSA et ECDHC 

En dépit de ce que le mot proof pourrait laisser penser, Google rappelle fort pertinemment qu'une implémentation qui passerait tous les tests n'est pas pour autant garantie être sans défaut. C'est toujours le même problème avec les tests. Lorsqu'ils sont passés avec succès cela prouve seulement qu'ils n'ont pas permis de trouver un bug, mais cela ne prouve pas l'absence de bug.

Cette réserve faite, le projet Wycheproof est une belle initiative. Wycheproof est open source et le code de ses tests est accessible sur GitHub.