PostgreSQL

Sortie de PostgresSQL 10

Soumis par fredericmazue le

Le PostgreSQL Global Development Group annonce ce jour la sortie de PostgreSQL 10, dernière version du système libre de gestion de bases de données SQL.

Distribuer les données sur plusieurs nœuds est une fonctionnalité critique aujourd'hui. Cela permet d'améliorer les temps d'accès, de maintenance et d'analyse des données. Cette technique est apparentée à la stratégie du “Diviser pour mieux régner”.

Cette nouvelle version de PostgreSQL embarque différentes améliorations dans l'implantation de cette technique, dont la réplication logique, le partitionnement déclaratif des tables et une amélioration du parallélisme de requêtes.

“Notre communauté de développeurs s'est concentrée sur la mise en œuvre de fonctionnalités qui profiteront des infrastructures modernes pour distribuer la charge”, a déclaré Magnus Hagander, membre de la core team(https://www.postgresql.org/developer/core/) du PostgreSQL Global Development Group (https://www.postgresql.org/). “Des fonctionnalités comme la réplication logique et l'amélioration du parallélisme représentent des années de travail et prouvent le dévouement constant de la communauté pour assurer la suprématie de PostgreSQL alors que la demande évolue.”

Cette version marque aussi un changement dans la gestion des numéros de version pour PostgreSQL, pour adopter le format en “x.y”. Ainsi, la prochaine version mineure de PostgreSQL sera la 10.1 et la prochaine version majeure sera la version 11.

  • La réplication logique - Un framework de publication/souscription pour distribuer les données :

La réplication logique élargit les possibilités des fonctionnalités actuelles de réplication de PostgreSQL avec la capacité d'envoyer les modifications sur un ensemble de bases PostgreSQL tout en filtrant les données pour ne répliquer que certaine(s) base(s) ou certaine(s) table(s). Les utilisateurs pourront ensuite envoyer les données répliquées sur plusieurs clusters PostgreSQL et pourront même effectuer une migration vers une future version majeure sans impact utilisateur.

« Nous avons beaucoup utilisé PostgreSQL depuis la version 9.3 et sommes vraiment impatients de voir arriver la version 10, car elle apporte les bases d'un vrai partitionnement, fonctionnalité très attendue, et qu'elle permet la réplication logique native. Cela va nous permettre d'utiliser encore plus PostgreSQL pour nos services », a annoncé Vladimir Boroin, Responsable DBA chez Yandex (https://www.yandex.com/)

  • Partitionnement de table déclaratif - La division facile de vos données :

Le partitionnement de table existe depuis des années dans PostgreSQL, mais nécessitait que l'utilisateur maintienne un ensemble de règles et de triggers non triviaux pour que cela fonctionne.

PostgreSQL 10 ajoute une nouvelle syntaxe pour partitionner une table. Celle-ci permet de créer, maintenir et lister les partitions d'une table. Cet ajout est la première étape d'une série de fonctionnalités permettant de fournir un véritable framework de partitionnement dans PostgreSQL.

  • Amélioration de la parallélisation des requêtes - L'analyse rapide de vos données :

PostgreSQL 10 améliore la parallélisation des requêtes pour permettre à plus de sous-parties d'une requête d'être exécutées parallèlement. L'amélioration concerne de nouveaux types de parcours de données, parallélisés, ainsi que des optimisations dans le cas de recombinaison des données, comme lors d'un pré-tri. Ces améliorations accélèrent l'arrivée des résultats.

  • Validation par quorum pour les réplications synchrones - La distribution des données en toute confiance :

PostgreSQL 10 ajoute une validation par quorum pour les réplications synchrones, ce qui permet plus de flexibilité dans la manière dont le nœud primaire reçoit les acquittements d'écriture sur disque des réplications. Un administrateur peut maintenant préciser le nombre de réplicas qui doivent valider la réelle écriture des données dans la base pour que les données soient considérées comme enregistrées en toute sécurité.

« La validation par quorum pour les réplications synchrones dans PostgreSQL 10 donne plus de possibilités pour améliorer la possibilité de promouvoir une infrastructure en quasi-continuité de service du point de vue de l'application. Cela nous permet de déployer en continu et de mettre à jour notre base de données sans avoir recours à de longues fenêtres de maintenance », a déclaré Curt Micol, ingénieur de production chez Simple Finance (https://www.simple.com/).

  • Authentification SCRAM-SHA-256 - La sécurisation de l'accès à vos données :

L'authentification SCRAM (Salted Challenge Response Authentication Mechanism) définie dans la [RFC5802](https://tools.ietf.org/html/rfc5802) décrit un protocole pour améliorer la sécurisation du stockage et de la transmission du mot de passe en fournissant un cadre pour la négociation de mots de passe forts. PostgreSQL 10 ajoute la méthode d'authentification SCRAM-SHA-256, telle que définie dans la [RFC7677](https://tools.ietf.org/html/rfc7677), pour proposer une solution plus sécurisée que la méthode d'authentification actuelle, basée sur MD5.

Téléchargements : https://www.postgresql.org/downloads
Notes de version : https://www.postgresql.org/docs/current/static/release-10.html

Publication de PostgreSQL 10 Bêta 1

Soumis par fredericmazue le

Le PostgreSQL Global Development Group annonce la première bêta de la version 10 de PostgreSQL. Cette version contient une pré-version de toutes les fonctionnalités disponibles dans  la version finale.

Même si quelques modifications peuvent encore intervenir. Les utilisateurs peuvent désormais tester leurs applications avec cette version en prévision de la version finale.

La nouvelle version contient de nombreuses fonctionnalités nouvelles. Ces fonctionnalités faciliteront les extensions internes (scale up) et externes (scale out) des  infrastructures PostgreSQL :

  • Réplication logique : Option intégrée pour la réplication de tables spécifiques ou la migration ;
  • Partitionnement de table natif : partitionnement par liste ou intervalle comme objets natifs ;
  • Parallélisme de requête additionnel : inclusion des parcours d'index, bitmap et merge joins ;
  • Quorum Commit pour la réplication synchrone : s'assurer contre la perte de plusieurs nœuds.

Cette version inclut également 3 améliorations concernant les connexions à PostgreSQL, que le PostgreSQL Global Development Group demande aux auteurs de connecteurs de supporter, et aux utilisateurs de tester :

  • Authentification SCRAM, pour des accès par mot de passe plus sûrs ;
  • "Failover" multi-hôtes, connexion au premier nœud disponible dans une liste d'hôtes ;
  • paramètre target_session_attrs, pour permettre au client de demander un hôte en lecture/écriture.

De nombreuses autres fonctionnalités et améliorations ont été ajoutées à PostgreSQL 10. Citons :

  • Index Hash résistants aux crash, et réplicables ;
  • Statistiques multi-colonnes corrélées ;
  • Nouveaux rôles de "monitoring" pour les octrois de permissions ;
  • Temps d'attente de verrou dans pg_stat_activity ;
  • expression de requête XMLTABLE ;
  • Politiques restrictives pour Row Level Security ;
  • Support Full Text Search pour JSON et JSONB;
  • Support de la compression support pour pg_receivewal ;
  • Support des collations ICU ;
  • Push Down Aggregates pour les serveurs externes ;
  • Transition Tables dans l'exécution des triggers.

De plus, les développeurs ont contribué à l'amélioration des performances de la fonction SUM(), de la conversion d'encodage de caractères, de l'évaluation d'expression, des grouping sets, et des jointures sur des colonnes uniques. Les requêtes analytiques sur des forts volumes de données devraient être 40% plus rapides.

La liste complète des fonctionnalités nouvelles ou modifiées est dans la note de version https://www.postgresql.org/docs/devel/static/release-10.html.

Le PostgreSQL Global Development Group compte sur tous pour tester cette version.

Enfin, la version 10 contient de nombreuses modifications incompatibles avec les versions majeures qui précédent. En particulier le renommage de "xlog" en "wal" et la modification de la numérotation des versions.

Page de téléchargement : https://www.postgresql.org/download/

Publication de PostgreSQL 9.6.2 et autres mises à jour cumulatives

Soumis par fredericmazue le

Le PostgreSQL Global Development Group a publié une mise à jour de toutes les versions supportées de notre système de base de données. Il s'agit des versions mineures 9.6.2, 9.5.6, 9.4.11, 9.3.16 et 9.2.20. Cette publication corrige des problèmes potentiels de corruptions de données lors de la construction d'index et dans certaines situations d'applications des journaux de transactions (`write-ahead-log`).

Ces situations sont détaillées ci-dessous. Elle corrige aussi plus de 75 bugs reportés ces 3 derniers mois. Comme toujours, les mises à jour doivent être appliquées le plus rapidement possible

Corruption due à CREATE INDEX CONCURRENTLY

Il existe une situation de concurrence (« race condition ») si CREATE INDEX CONCURRENTLY est appelé sur une colonne qui n'a pas déjà été indexée. Il se peut que des enregistrements insérées ou mis à jour par des transactions exécutées en même temps que la commande CREATE INDEX CONCURRENTLY soient indexés incorrectement. Si un tel cas est suspecté, la solution la plus fiable consiste à reconstruire les index concernés après l'installation de la mise à jour. Ce problème est présent dans les versions 9.2, 9.3, 9.4, 9.5, et 9.6 de PostgreSQL.

Correctifs de visibilité et stabilité de l'enregistrement des journaux de transactions

Cette publication contient plusieurs correctifs améliorant la stabilité des données visibles et les enregistrements des journaux de transactions (`WAL`) que nous souhaitons mettre en évidence ici. Avant cette publication, des données pouvaient être prématurément supprimées par une opération de maintenance (« vacuum ») lorsqu'un « snapshot » particulier, utilisé pour les lectures du catalogue, est disponible. Plus particulièrement, le « vacuum » n'a pas connaissance du plus vieux « xmin » de ce « snapshot » spécial. L'erreur apparaîtra avec un message du style :

```
    “cache lookup failed for relation 1255”
```

Cette mise à jour s'assure que les « vacuum » prennent en compte les « snapshots » de lectures du catalogue. Il y a égelament plusieurs correctifs améliorant la stabilité de l'enregistrement des journaux de transactions.

PostgreSQL 9.6 est sorti

Soumis par fredericmazue le

Le PostgreSQL Global Development Group a publié aujourd'hui PostgreSQL 9.6, dernière version du système libre de gestion de bases de données SQL.

Cette version va permettre aux utilisateurs de réaliser à la fois une expansion interne (scale up) et externe (scale out, répartition de la charge) de leurs bases de données haute-performance. Les nouvelles fonctionnalités incluent notamment le parallélisme des requêtes, des améliorations sur la réplication synchrone, la recherche par phrase, ainsi que des améliorations sur la performance et la facilité d'utilisation.

Expansion interne avec le parallélisme des requêtes

La version 9.6 ajoute le support du parallélisme pour certaines opérations dans les requêtes. Ce parallélisme active l'utilisation de tout ou partie des cœurs de processeur d'un serveur pour retourner les résultats plus rapidement. Sur cette version, le parallélisme concerne le parcours séquentiel (des tables), les agrégats et les jointures. En fonction des caractéristiques et du nombre de cœurs, le parallélisme permet d'espérer des gains jusqu'à un facteur 32 sur des requêtes traitant des volumes importants de données.

"J'ai migré l'intégralité de notre plateforme génomique - soit 25 milliards de lignes issues de MySQL - vers une seule base de données Postgres, en utilisant les possibilités de compression du type JSONB, les excellentes méthodes d'indexation GIN, BRIN et B-tree. Aujourd'hui, avec la version 9.6, j'attends de pouvoir exploiter le parallélisme des requêtes pour améliorer encore plus les performances des requêtes sur les tables volumineuses" indique Mike Sofen, Chief Database Architect chez Synthetic Genomics.

Répartition de charge avec la réplication synchrone et postgres_fdw

Deux nouvelles options ont été ajoutées à la réplication synchrone de PostgreSQL. Elles permettent de maintenir des lectures cohérentes de données sur les nœuds d'un cluster de bases de données. En premier lieu, il est désormais possible de configurer des groupes de réplication synchrone. En second lieu, le mode "remote_apply" (application distante) crée une vue plus cohérente des données sur les différents nœuds. Ces fonctionnalités utilisent la réplication interne pour maintenir un groupe de nœuds "identiques" afin d'équilibrer la charge de lecture (load-balancing).

Le pilote de fédération de données entre bases PostgreSQL, postgres_fdw, dispose de nouvelles fonctionnalités d'exécution du travail sur le serveur distant. En "externalisant" les tris, les jointures et les mises à jour par lot, la charge peut être distribuée sur plusieurs serveurs PostgreSQL. Ces possibilités seront bientôt ajoutées aux autres pilotes FDW.

"Avec les possibilités d'externaliser les jointures, les mises à jour et les suppressions, les Foreign Data Wrappers offrent maintenant une solution complète de partage de données entre PostgreSQL et les autres bases de données. Par exemple, PostgreSQL peut être utilisé pour gérer en entrée des données qui vont vers des bases de données différentes" indique Julyanto Sutandang, Director of Business Solutions chez Equnix.

Meilleure recherche de texte avec des phrases

La fonctionnalité de recherche plein texte de PostgreSQL supporte désormais les recherche par phrases. Cela permet une recherche de phrases exactes ou de mots proches les uns des autres, en utilisant l'indexation GIN. Additionnée aux nouvelles fonctionnalités d'optimisation de la recherche textuelle, ces nouvelles fonctionnalités font de PostgreSQL un outil de choix pour la "recherche hybride" mêlant relationnel, JSON et recherche plein texte.

Plus agréable, plus rapide et plus facile à utiliser

Grâce au retours d'expérience et aux tests effectués par les utilisateurs de PostgreSQL disposant de bases de données de production à fort volume, le projet a pu améliorer de nombreux aspects des performances et de la maniabilité dans cette version. La réplication, les agrégats, l'indexation, les tris et les procédures stockées sont plus efficaces, et PostgreSQL utilise désormais mieux les ressources lorsqu'il est installé sur des noyaux Linux récents. Le surcoût d’administration des tables volumineuses et des charges complexes a été réduit, notamment par des améliorations du VACUUM.

Téléchargements : https://www.postgresql.org/downloads

Notes de version : https://www.postgresql.org/docs/current/static/release-9-6.html

Sortie de EDB Postgres Replication Server 6.0

Soumis par fredericmazue le

EnterpriseDB annonce la disponibilité d'EDB Postgres Replication Server 6.0, une solution à base de journal de réplication multi-maître prête pour la production, dotée de la technologie mise au point par PostgreSQL. Selon l'éditeur cette solution permet de réduire la latence pendant la réplication des données et d'accroître sensiblement les performances des charges de travail transactionnelles qui nécessitent une réplication.

« La réplication des données est devenue une opération stratégique dans les centres de données complexes et de plus en plus grands, à l'heure où les informations sont répliquées géographiquement et transférées de systèmes transactionnels vers des applications et des bases de données spécialisées. Cette situation stimule la demande pour des solutions plus rapides pouvant répliquer les données sans ralentir les opérations de base », explique Marc Linster, Ph.D., vice-président directeur des produits et des services chez EDB. « EDB Postgres Replication Server 6.0 est la solution de réplication la plus sophistiquée et la plus puissante, et ses performances dépassent de loin celles des outils de la génération précédente qui existent sur le marché. Elle a recours à la toute dernière technologie disponible pour procurer aux organisations une réplication géographique, entre plates-formes, et leur offrir la flexibilité et la rapidité que leurs systèmes exigent pour l'innovation numérique ».

EDB Postgres Replication Server 6.0 intègre la fonctionnalité de décodage logique, introduite dans PostgreSQL 9.4, qui permet d'extraire des changements dans les segments Write-Ahead Log (WAL). Il n'est donc plus nécessaire d'utiliser des déclencheurs, lesquels créent une surcharge d'informations dans les bases de données de publication. Puisque le flux WAL existe déjà, cette technique à base de journal n'a aucun impact sur le serveur de publication, et elle réduit la latence. Lors de tests de performance réalisés avec des testeurs EDB Postgres Replication Server 6.0 bêta, EDB a enregistré des taux de latence inférieurs à une seconde, une amélioration sensible par rapport au passé, même lorsque les taux de transaction étaient poussés à environ 2 000 transactions par seconde.

Nouvelles fonctionnalités et capacités

Outre la réplication à base de journal, la nouvelle version d'EDB Postgres Replication Server inclut toute une série de nouvelles capacités et d'améliorations, parmi lesquels :

  • Haute disponibilité intégrée pour le schéma de contrôle de réplication qui élimine les zones sensibles localisées et la nécessité d'une base de données de contrôle distincte. Le schéma de contrôle est désormais intégré dans des bases de données de publication, et la réplication des informations opérationnelles est automatisée vers d'autres bases de données de publication.
  • Meilleures performances dans la détection de conflits grâce à l'expression Common Table Expression. Nouvelle prise en charge de la réplication cliché et synchrone pour les types de gamme, lesquels représentent des ensembles de valeurs, y compris des nombres, des dates et des horodatages.
  • Nouveau sélecteur de caractères de remplacement pour des sélections de table de publication en masse. Il est donc possible de sélectionner un ensemble de tableaux en ayant recours à un appariement de formes comparable à la technique utilisée par la clause LIKE de déclaration SQL lors de la création de tableaux ou de leur ajout à une publication.
  • Nouvelles séquences multi-maîtres prêtes pour la réplication, qui s'améliorent lors de l'utilisation typique de séquences standard pour éviter des conflits d'unicité. Elles peuvent être utilisées pour éviter des conflits d'unicité (insertion/insertion) dans des tableaux qui n'ont pas de clé primaire inhérente unique.
  • Interface améliorée pour la réplication DDL (Data Definition Language), et qui prend désormais en charge l'acceptation de déclarations ALTER TABLE grâce à une saisie directe dans la boîte de dialogue Alter Publication Table en copiant et collant le texte de la déclaration depuis une autre source, ou en tapant les déclarations directement dans la boîte de dialogue. Avant cela, les déclarations devaient être fournies au moyen d'un fichier texte sauvé.

Disponibilité

EDB Postgres Replication Server 6.0 est disponible pour la réplication uni-maître et la réplication multi-maître. Elle fait partie d'EDB Integration Suite, un ensemble de solutions inclu dans la plate-forme EDB Postgres pour prendre en charge l'intégration avec d'autres sources de données au sein d'un centre de données. La plate-forme EDB Postgres est disponible par abonnement. Pour découvrir la plate-forme EDB Postgres, cliquez ici.

EntrepriseDB lance la plateforme EDB Postgres

Soumis par fredericmazue le

EnterpriseDB annonce la disponibilité de la plateforme EDB Postgres, plateforme intégrée fondée sur du code open source pour la gestion de base de données d’entreprise.

EDB Postgres est une première plateforme intégrée de gestion opérationnelle de données fondée sur code source ouvert et qui rassemble la totalité des composants nécessaires pour la gestion de données structurées et non structurées dans un modèle fédéré. Si la plateforme permet une intégration à travers différentes bases de données, elle prend également en charge la combinaison de données non structurées de solutions NoSQL avec des données transactionnelles d'entreprise dans des systèmes relationnels structurés.

La plateforme EDB Postgres comporte :

  • Le choix de deux versions de serveur pour EDB Postgres Database :  EDB Postgres Standard Server, base de données en source libre PostgreSQL ; ou ( EDB Postgres Advanced Server, version améliorée de PostgreSQL avec performance étendue de classe entreprise, modularité, fonctionnalités et capacités de sécurité : les clients disposent d'options multiples s'adaptant à leurs exigences spécifiques.
  • Des solutions dans la Management Suite, fournissant des capacités de récupération critique en cas de désastre, haute disponibilité, suivi et mise au point.
  • Une Migration Suite permettant aux organisations de migrer des charges de travail à partir d'autres solutions, notamment Oracle, au moyen de la compatibilité de base de données pour Oracle, développée par EDB.
  • Une Integration Suite mettant en vedette une collection de solutions prenant en charge la réplication de données et l'intégration d'EDB Postgres dans d'autres solutions telles que MongoDB et Hadoop.
  • Assistance et services pour compléter l'écosystème de la solution Postgres fournie aux clients EDB en tant qu'assistance mondiale 24 heures sur 24 et 7 jours sur 7. Des mises à jour sont comprises dans les souscriptions à la plateforme EDB Postgres ; des formations et services professionnels sont disponibles pour veiller à ce que les clients réalisent un retour sur investissement.

La plateforme EDB Postgres est disponible sous forme de souscription, comprenant la totalité des composantes de solutions pour gestion de données, l'assistance Postgres, les nouvelles versions de logiciel et un accès à une grande partie du réseau de partenaires d'EDB. Le logiciel EDB Postgres peut être déployé sur bare metal, virtuellement -y compris dans des environnements conteneurs -, ou dans des environnements cloud publics, privés et hybrides. EDB Postgres est basée sur un code source ouvert, sur des normes et elle fonctionne sur tous les grands systèmes opérationnels, dont divers distributeurs de Linux et Windows, souligne l'éditeur.

Site : www.enterprisedb.com

PostgreSQL 9.6 Beta

Soumis par fredericmazue le

Le PostgreSQL Global Development Group annonce aujourd'hui la première bêta de la version 9.6 de PostgreSQL.

Cette version contient toutes les fonctionnalités qui seront dans la version finale. Peu de modifications devraient intervenir.

Les utilisateurs peuvent désormais tester leurs applications avec cette version en préparation de la version finale.

Fonctionnalités principales de la 9.6

La version 9.6 inclut de nombreuses modifications et des améliorations intéressantes, dont :

  • les parcours séquentiels, jointures et aggrégats parallèles ;
  • le support de clusters cohérents scalables en lecture au travers de serveurs standby synchrones, et commits synchrones "remote_apply" ;
  • la recherche plein-texte de phrases ;
  • postgres_fdw peut désormais exécuter les tris, jointures, UPDATEs, DELETEs sur les serveurs distants ;
  • un impact réduit des autovacuum sur les tables volumineuses, par l'évitement de "refreezing" de données anciennes.

En particulier, l'exécution parallèle apportera des gains de performance importants pour toutes les requêtes supportées.

Aide à la traque des bogues

Comme pour toutes les versions majeures, les améliorations de PostgreSQL incluent des modifications sur de très grandes parties du code.

Le PostgreSQL Global Development Group compte sur vous pour tester le code modifié sur vos environnements de tests, et vos charges pour traquer les bogues et régression avant la publication de la version 9.6.0.

En plus de tester que les nouvelles fonctionnalités fonctionnent comme documentées, testez également :

  • Est-ce que les requêtes parallèles améliorent les performances pour vous ?
  • Arrivez-vous à faire planter les requêtes parallèles ou à perdre des données ?
  • Nos modifications empêchent-elles PostgreSQL de fonctionner sur vos plateformes ?
  • La version améliorée de vacuum freeze réduit-elle correctement l'autovacuum des tables volumineuses ?
  • Est-ce que les résultats retournés par la recherche de phrases retourne les résultats attendus ?

La Version 9.6 Beta 1 modifie également l'API des backups binaires. Les utilisateurs sont invités à tester la version 9.6 avec les outils de sauvegarde tels que pgBackRest, Barman, WAL-E ou tout autre outil interne ou packagé.

Comme il s'agit d'une Beta, des modifications mineures au fonctionnement, fonctionnalités, et API sont possibles.

Page de téléchargement : http://www.postgresql.org/download/

Information sur les tests des bêta : http://www.postgresql.org/developer/beta

PostgreSQL 9.5 : UPSERT, Row Level Security et Big Data

Soumis par fredericmazue le

Le PostgreSQL Global Development Group annonce la publication de la version 9.5 de PostgreSQL.

Cette version ajoute les capacités d'UPSERT, les droits de niveau ligne (Row Level Security), et de nombreuses fonctionnalités orientées Big Data, qui ouvrent plus grand encore les possibilités d'utilisation de PostgreSQL.

Annie Prévot,  DSI de la CNAF, déclare, « La CNAF sert 11 millions d'allocataires. Elle verse 73 milliards d'euros par an, au travers de 26 types de prestations. Ce service, essentiel à la population, s'appuie sur un système d'information qui se doit d'être absolument performant et fiable. Le système d'information de la CNAF s'appuie avec satisfaction sur le gestionnaire de Base de données PostgreSQL. En utilisation sur la moitié des systèmes, ce logiciel libre offre toutes les garanties de fonctionnement et de fiabilité. Il est en phase de déploiement sur l'ensemble des systèmes.

UPSERT 

UPSERT, raccourci de « INSERT, ON CONFLICT UPDATE », est une fonctionnalité réclamée depuis longtemps par les développeurs d'applications.

Elle permet de traiter de la même façon l'ajout ou l'actualisation de lignes.

UPSERT simplifie le développement des applications web et mobile en permettant de laisser la base gérer les conflits entre modifications concurrentes des données.

Cette fonctionnalité supprime également la dernière barrière à la migration d'applications MySQL historiques vers PostgreSQL.

La nouvelle clause ON CONFLICT permet d'ignorer la nouvelle donnée, ou d'actualiser différentes colonnes ou relations, de façon à supporter les chaînes d'ETL (Extract, Transform, LOAD) les plus complexes.

Et, à l'instar de PostgreSQL, cette fonctionnalité a été conçue pour être totalement concurrentielle, et s'intégrer avec les autres fonctionnalités de PostgreSQL, dont la réplication logique.

Row Level Security

PostgreSQL continue d'étendre les possibilités de sécurisation des accès, avec la nouvelle fonctionnalité Row Level Security (RLS).

RLS propose un vrai contrôle d'accès par ligne et par colonne, qui s'intègre avec les outils externe de sécurisation, tel SELinux.

RLS est l'aboutissement de 5 ans d'ajout de fonctionnalités de sécurité à PostgreSQL, ce qui inclut les travaux de  KaiGai Kohei de NEC, Stephen Frost de Crunchy Data, et ceux de Dean Rasheed. À travers cette fonctionnalité, les administrateurs de base de données peuvent définir des politiques de sécurité, qui filtrent les lignes visibles en fonction des utilisateurs.

La sécurisation mises en place par ce biais est résistante aux injections SQL et autres trous de sécurité de niveau applicatif, souligne postgresql.org.

Fonctionnalités Big Data

PostgreSQL 9.5 inclut de nombreuses nouvelles fonctionnalités pour les bases plus volumineuses, et l'intégration avec les systèmes Big Data.

Citons :

Les index BRIN : Ce nouveau type d'index permet la création d'index beaucoup plus petits, mais très efficaces, pour les tables volumineuses. Il est nécessaire que les données soient ordonnées.

Par exemple, des tables contenant des millions de lignes de traces peuvent être indexées et interrogées en 5% du temps nécessaire lors de l'utilisation d'index de type BTree.

Tris plus rapides : PostgreSQL trie désormais les données textuelles et numériques plus rapidement, à l'aide d'un algorithme appelé "clés abrégées" ou "abbreviated keys".

Cela accélère certaines requêtes qui nécessitent de trier des volumes considérables de données d'un facteur 2 à 12, et peut également accélérer la création d'index d'un facteur 20.

CUBE, ROLLUP et GROUPING SETS : Ces nouvelles clauses du standard permettent de produire des rapports avec plusieurs niveaux de synthèse en une seule requête.

CUBE permet également une meilleure intégration de PostrgreSQL avec un nombre plus grand d'outils de création de rapports OLAP (Online Analytic Processing), tel Tableau.

Les Foreign Data Wrappers (FDW) : Ils permettent déjà d'utiliser PostgreSQL pour interroger des systèmes Big Data, tel Hadoop ou Cassandra. La version 9.5 ajoute IMPORT FOREIGN SCHEMA et les jointures au niveau des sources externes, ce qui rend les connexions aux données externes plus efficaces et plus faciles à établir.

TABLESAMPLE : Cette clause SQL permet de récupérer rapidement un échantillon statistique d'une table sans tri coûteux.

« Le nouvel index BRIN apparu dans PostgreSQL 9.5 est une fonctionnalité puissante qui permet à PostgreSQL de gérer et indexer des volumes de données difficiles, voire impossibles à traiter par le passé. Il permet de faire évoluer les données et les performances au delà de la limite considérée précédemment avec les bases relationnelles traditionnelles et fait de PostgreSQL une solution parfaite pour les analyses Big Data," déclare Boyan Botev, Lead Database Administrator, Premier, Inc.

Téléchargement : www.postgresql.org/downloads

Sortie de PostgreSQL 9.5 beta 2

Soumis par fredericmazue le

Le PostgreSQL Global Development Group annonce aujourd'hui la deuxième bêta de  la version 9.5 de PostgreSQL.

Cette version contient toutes les fonctionnalités et API qui seront dans la version finale. Peu de modifications devraient intervenir. Les utilisateurs peuvent désormais tester leurs applications avec cette version en préparation de la version finale.

Différences avec la Beta 1

Les nombreux bogues remontés par les utilisateurs et les contributeurs ont été  corrigés.

Citons :

  • de nombreux ajustements de la documentation ;
  • le renommage de PQsslAttributes() en PQsslAttributeNames() ;
  • le passage de données de contexte aux pgworkers ;
  • la correction de problèmes avec les workers parallèles ;
  • la correction de divers bogues sur les index BRIN ;
  • la correction de différents problèmes de traçage des timestamp de commit lors de la réplication ;
  • ssl_renegotiation_limit est désormais positionné à 0.

Le projet PostgreSQL publiera d'autres bêta, si nécessaire, puis une ou plusieurs release candidates, jusqu'à la version finale, fin 2015.

Page de téléchargement : http://www.postgresql.org/download/

PostgreSQL : un correctif de sécurité pour toutes les branches actives

Soumis par fredericmazue le

Le PostgreSQL Global Development Group a publié une mise à jour de toutes les versions maintenues du système de gestion de bases de données.

Cette mise à jour inclut les versions 9.4.5, 9.3.10, 9.2.14, 9.1.19 et 9.0.23. Elle corrige deux failles de sécurité, et les bogues découverts au cours des 4 derniers mois.

Les utilisateurs vulnérables aux failles de sécurité doivent procéder à la mise à jour le plus vite possible. Les autres peuvent utiliser la prochaine fenêtre de maintenance programmée pour procéder à la mise à jour.

Les deux failles de sécurité corrigées. sont les suivantes :

CVE-2015-5289 : les valeurs json ou jsonb en entrée, construites à partir de saisies utilisateurs aléatoires, peuvent entraîner un crash de PostgreSQL et un déni de service.

CVE-2015-5288 : La fonction crypt() incluse dans le paquet d'extension optionnel pgCrypto peut être exploitée pour lire quelques octets supplémentaires de mémoire. Aucun exploit fonctionnel n'a été développé pour cette faille.

Le projet PostgreSQL est redevable à Josh Kupershmidt et Oskari Saarenmaa pour la découverte de ces failles.

Cette mise à jour désactive également la renégociation SSL par défaut qui était activée par défaut auparavant. La renégociation SSL sera complètement supprimée des versions de PostgreSQL postérieures à la 9.5.

Cette mise à jour corrige en outre de nombreux problèmes remontés par les utilisateurs au cours des derniers mois.

Plus d'informations