DB Tuner est un module Drupal qui a pour but de faciliter l’optimisation de votre base de données MySQL

Il va vous permettre d’agir sur les indexes, le moteur de base de données utilisé (InnoDB, MyISAM…), les Collations, et va vous permettre également d’exécuter MySQL Tuner donc j’ai déjà parlé. Il montre aussi quels sont les requêtes longues.

Voici plus en détails ce qu’apporte DB Tuner :

Les index :

Il va montrer quelles colonnes CCK sont utilisées dans un filtre Views ou une relation et vous donne la possibilité d’ajouter un index afin que la requête Views s’exécute plus rapidement. Vous pouvez aussi ajouter des index aux modules « core »

Moteur de base de données

Possibilité de convertir votre base de données de MyISAM vers InnoDB afin d’éliminer les locks sur les tables lors de l’écriture de données.

Collation

Possibilité de convertir la collation de vos tables en utf8_general_ci

Explication de vues lentes :

Vous fournit le nombre et la liste des vues lentes, et des explications sur les temps de génération.
MySQL Tuner

Intégration de l’outils MySQL Tuner

Bref, c’est un outils intéressant, mais bien sur à manier avec beaucoup de précautions.

Liens utiles :

Le module DB Tuner sur drupal.org

Launchpad de MySQL Tuner

Perconna XtraBackup est une solution libre sous licence GNU GPL v2 de sauvegarde à chaud pour base de données MySQL.

Il est possible de sauvegarder des bases de données au format InnoDB, XtraDB ou encore MyISAM sous MySQL 5.0 et 5.1.

Percona XtraBackup est la combinaison du programme C xtrabackup et le script Perl innobackupex.

Le programme xtrabackup copie et manipule les fichiers de données InnoDB et XtraDB, alors que le script Perl permet d’augmenter les fonctionnalités, comme l’interaction avec un serveur MySQL et la sauvegarde de tables MyISAM.

Xtrabackup fonctionne sous Linux, Windows et FreeBSD.

Liste de fonctionnalités :

• Hot backups - Sauvegarde à chaud sans interruption de fonctionnement
• Sauvegarde MyISAM – Les tables MyISAM sont en lecture seule pendant qu’ils sont en cours de sauvegarde.
• Sauvegarde Partielle – Il est possible de sélectionner quelle table et base de données sauvegarder.
• Haute Performance – XtraBackup est rapide et à faible impact. Il prend un soin particulier à ne pas perturber votre serveur de base de données. Il peut copier des fichiers en parallèle (dans plusieurs threads) pour des performances encore plus élevées.
• Sauvegarde Distante – Vous pouvez faire des sauvegardes locales, vous pouvez copier vos sauvegardes en toute sécurité à un hôte distant après l’achèvement.
• Compression des sauvegardes -Vous pouvez réaliser vos sauvegardes dans un format compressé. tar4ibd utilisé ici, est capable de travailler avec les format InnoDB
• Sauvegarde Incrémentale – Il est possible de sauvegarder seulement les pages qui ont changées depuis la dernière sauvegarde.

• Restauration à un instant T – Il est possible de restaurer une sauvegarde en utilisant les logs binaire et de faire un retour arrière à un instant donné.

Liens Utiles :

Site officiel de Percona XtraBackup

Wiki de Percona XtraBackup

WampServer est une plate-forme de développement de site Web visant à fournir une architecture de type Apache-Mysql-Php aux utilisateurs sous Windows.

Après environ un an et demi sans nouvelle version (2.0-i — 11/07/2009), voici donc une nouvelle version qui contient bien sur son lot de nouveautés, de portage en 64 bits et de corrections de bug.

Voici la liste des nouveautés par version depuis la nouvelle 2.1 par ordre chronologique :

2.1-a — 24/12/2010 (Sympa le cadeau de Noël)

• passage à Apache 2.2.17
• passage à Php 5.3.3
• Mysql 5.1.53 (version 64 bits)
• Mysql 5.5.8 (version 32 bits)
• passage à PhpMyadmin 3.2.0.1
• passage à SQLBuddy 1.3.2

2.1-b — 27/12/2010

• réduction de la taille des executables
• modification des .iss pour permettre le passage de 2.0 à 2.1
• Pour la version 64 bits
• La version est 100% 64 bits
• Utilisation de VC9 PHP 5.3.4 et Apache 64 2.2.17

2.1-c — 28/12/2010

• Intégration de la librairie Xdebug pour les versions 32 et 64 bits
• Modification des Menus d’Aestran
• Intégration de l’outil webgrind 1.0
• Intégration du client Windows XDC 1.5

2.1-d — 07/01/2011

• Passage à PHPMyAdmin 3.3.9

2.1-e — 08/01/2011

• Passage à PHP 5.3.5

J’ai choisi de laisser la liste des nouveautés au format Changelog pour vous montrer à quelle fréquences évolue WampServer actuellement

Autant dire que le développement est de nouveau très actif.

Il est à noter que désormais il existe une version portable de WampServer nommé Wampee qui est destinée aux support amovible type Clef USB.

Il est d’ailleurs supporté par le groupe Alter Way pour ceux qui ne le sauraient pas encore.

Liens utiles :

Site Officiel de WampServer

Télécharger WampServer

Presque 2 ans après la sortie de la version 1.2 de GreenSQL et le support natif de la base de données PostgreSQL, GreenSQL vient de sortir une nouvelle version majeure.

Pour rappel ou information, GreenSQL est un firewall de bases de données MySQL et PostgreSQL, il fonctionne comme un proxy entre l’application qui interroge et la base de données. Pour plus d’informations sur le mode de fonctionnement, je vous invite à lire l’article que j’avais écrit par le passé au sujet de GreenSQL

GreenSQL est une solution libre sous licence GPL permettant de protéger vos bases de données MySQL des attaques de type « SQL Injection », « Cross-Site Scripting » et « Cross-Site Requests Forgeries ».

Depuis d’ailleurs l’annonce de cette sortie, il y a eu pas mal de changement au niveau de l’éditeur de GreenSQL qui propose désormais 2 versions de GreenSQL, l’une communautaire et l’autre commerciale.

Je vous laisse le soin de découvrir de par vous même les différences entre ces 2 versions car ce n’est pas le sujet de cet article.

Voici la liste des nouveautés qu’apportent cette version :

• Correction de l’affichage sur le tableau de bord du statut du proxy.
• Correction du rechargement automatique du proxy.
• Notification incluant l’adresse IP utilisateur
• Meilleurs gestion des protocoles de MySQL et PostgreSQL
• Optimisations réseaux
• Notifications : Refonte
• Whitelist : Refonte
• Possibilité de suppression d’une alerte
• Possibilité de retirer une whitelist pour le repositionner en alterable.
• …

Donc voici pas mal de nouveautés qui semble intéressante.

Liens utiles :

Site Communautaire de GreenSQL

Annonce officielles de la sortie de GreenSQL 1.3

htop permet de monitorer l’activité de son serveur comme top, mais avec une interface plus ergonomqie et amélioré.

Il liste les processus, le load average, l’utilisation RAM / SWAP…

atop permet également de monitorer l’activité de se serveur linux.

atop permet de monitorer les processus, l’activité des disques, la charge processeur, l’utilisation du réseau ou de la mémoire (vive et swap).

LinuxPedia a fait un article très complet sur htop et atop. Je vous le conseille vraiment il est très complet.

apachetop fonctionne sur le même principe que top, mais lui concerne le serveur web apache

Il permet de voir les requêtes par seconde, les bytes par seconde l’url la plus populaire… sur un serveur web.

mytop permet de surveiller les requêtes et la performance MySQL

Il supporte les serveurs aux versions 3.22.x, 3.23.x, 4.x et 5.x

mtop permet de tracer et de diagnostiquer des requêtes en cours et leur déroulement, ce qui aidera à la résolution d’éventuelles requêtes mal écrites.

Il semblerait que mytop et mtop soit abandonné…

ptop ou pg_top est similaire à top pour postgresql. Il va permettre de voir les requêtes en cours, voir le plan d’exécution des requêtes SQL, voir les locks, voir les statistiques

dnstop permet de visualiser le trafic de son serveur dns, il permet notamment d’identifier les requêtes indésirables.

iftop permet de visualiser l’état de la bande passante sur une interface réseau.

Il y a de quoi trouver son bonheur je pense, il est à remarquer que l’application top aura suscité bien des possibilités.

Si vous en voyez d’autres, n’hésitez pas à me les soumettre.

Je vous parlez précédemment de GreenSQL est un Firefwall de base de données fonctionnant en mode proxy, entre votre serveur web et de bases de données.

Je vous avais parlé également que GreenSQL n’était compatible que pour MySQL et qu’une version compatible pour PostgreSQL était en cours de développement.

Et bien ça y est, avec cette nouvelle version qui est la 1.2, GreenSQL est désormais compatible avec PostgreSQL nativement.

GreenSQL intègre également par défaut la console de gestion, il vous sera posé la question à l’installation de savoir si vous souhaitez ou non l’installer.

La nouvelle console intègre désormais :

1. La configuration et sécurisation
2. La création et la modification facile de proxy pour les bases de données
3. La centralisation des alertes fonctionnant sur plusieurs bases de données
4. La possibilité de sauvegarder et restaurer la configuration
5. Un nouveau design

Tout ça me semble bien intéressant, à tester…

D’ailleurs si vous souhaitez le tester System-Linux a fait un howto d’installation de GreenSQL

Liens utiles :

Site Officiel de GreenSQL

Screenshot de GreenSQL

Ayant déjà eu a faire à des injections SQL, c’est quelque chose de très dérangeant…

GreenSQL est une solution libre sous licence GPL permettant de protéger vos bases de données MySQL des attaques de type « SQL Injection », « Cross-Site Scripting » et « Cross-Site Requests Forgeries ».

GreenSQL fonctionne en tant que proxy pour les requêtes SQL sur les bases de données MySQL. A noter qu’il est prévue de le faire fonctionner également sur les bases de données PostgreSQL selon la roadmap. Voici un post sur leur forum qui en parle avec pour titre : GreenSQL for PostgreSQL

Le fonctionnement est basé sur une évaluation des commandes SQL en utilisant une matrice de cotation des risques (ça me rappele spamassassin ça) ainsi que le blocage de commandes d’administration (DROP, CREATE, etc.)

GreenSQL fonctionne en mode reverse-proxy, c’est à dire, la requête SQL sera transmise à GreenSQL qui va l’analyser pour ensuite la transmettre à MySQL si bien sur, elle est acceptée.

Le schema ci-dessous explique son fonctionnement :

GreenSQL écoute le port 3305 et réexpédie les requêtes vers le port 3306, port standard de MySQL

GreenSQL peut fonctionner sous différents modes :

• Simulation (base de données IDS) – Ne fait que détecter mais ne bloque rien
• Protection (base de données IPS)- Détecter et bloque les requêtes
• Apprentissage
• Protection contre les requêtes non recencées

Durant le mode simulation, GreenSQL en fait que logguer les requêtes SQL et envoie une notifications via la console d’administration les requêtes suspicieuse en consultant la matrice de cotation des risques pour en informer les administrateurs.

Durant le mode Protection, si une requête est considérée comme illégale suite à l’interrogation de son moteur heuristique, une whitelist est consultée.

Si celle-ci apparait dans la whitelist elle est envoyée au moteur MySQL.

Si la requête est considérée comme illégale, GreenSQL renvoie une réponse vide pour ne pas bloguer l’application sur le serveur Web.

Bien sur avec ce mode, il est possible d’avoir des faux-positifs…

Le mode apprentissage sert justement à corriger cette problèmatique en apprenant le type de requêtes possible, il faudra ensuite le repasser en mode protection contre les requêtes non-recencées.

Quand le mode de protection contre les requêtes non-recencées est activé, les requêtes qui n’ont pas été intégrée dans la whitelist sont automatiquement rejetées.

GreenSQL va alors calculer les risques que représente cette requête et remonter l’information à la console de management.

C’est le mode le plus rapide car il ne fait que calculer le risque que pour les nouvelles requêtes.

Voilà en gros le fonctionnement de GreenSQL qui me paraît vraiment être une solution très intéressante, même si le mieux est toujours de prévoir les risques dans le développement, mais bon…

Concernant les performances de l’application web, elle ne paraissent pas tant impactées que cela selon un test de performance effectuée avec l’utilisation de GreenSQL

Des packages sont fournit pour les distributions linux le plus courantes (CentOS, Debian, Fedora, Mandriva, RHEL 5, SLE 5, Opensuse, Ubuntu)

La dernière version, qui est la 1.1.0, vient de sortir le 19 octobre, voici l’annonce de cette sortie

Liens utiles :

Site Officiel de GreenSQL

Démonstration de GreenSQL

Tsung est un outils de test de performances permettant de réaliser des benchmark massif.

Initialement créé par IDEALX sous le nom IDX-Tsunami par Nicolas Niclausse en 2000 pour stresser les serveur Jabber, ce projet à ensuite changé de nom en 2005 pour s’appeler Tsung (Pour Tsunami Next Generation).

Voici la liste de ses fonctionnalités principales :

• La charge peut être distribué sur un cluster permettant à chaque noeud de générer sa propre charge

• Multi-protocoles utilisant un système de plugin (HTTP, WebDAV, SOAP, PostgreSQL, MySQL, LDAP, SSL et XMPP/Jabber)

• De nombreuses adresses IP peuvent être utilisée en faisant de l’IP aliasing (eth0, eth0:1, eth0:2…)

• Support du snmp pour la supervision.

• Système de configuration via XML. De nombreuses sessions peuvent être utilisées pour simuler différents types d’utilisateur.

• Afin de générer un trafic réaliste, l’activité de l’utilisateur et le taux d’arrivée peut être aléatoire en utilisant une notion de probabilité.

• Des rapports HTML peuvent être générés en temps réel pour voir les temps de réponse, la charge CPU…

Je n’ai pas encore eu l’occasion de tester, mais ça m’a l’air assez impressionnant !!!

A noter qu’une nouvelle version vient de sortir le 28 septembre qui est la 1.3.1.

Cette version apporte le support de Pubsub (Publish-Subscribe) et MUC (Multi-User Chat) et améliore les performances (million d’utilisateurs). Ajout du support d’ajout Munin pour la supervision. Cette version apporte de nombreuses améliorations et corrections de bugs.

Pour avoir la liste complète vous pouvez consulter le changelog

J’essaieraie d’en faire un test prochainement et j’en ferait donc bien sur un retour plus complet et j’espère didactique ici

Liens utiles :

Site Officiel de Tsung

Quelques screenshots

- Firefox 3.5 vient de sortir ce jour en version Release Candidate 1, nom de code Shiretoko, je ne vais pas lister ici les nouveautés, hormis une grosse amélioration du traitement du javascript. A noter que l’annonce officielle n’a pas encore eu lieu, mais il est possible de l’avoir en installant la Beta 4, et en faisant les mises à jour.;)
Site Officiel
Téléchargement de Firefox Beta 4

- Areca Backup est une solution de sauvegarde sur disque local/distant, clef USB, FTP (supporte SSL/TLS). Pour plus d’informations allez voir sa fiche sur Framasoft
Une nouvelle version vient de sortir qui est la 7.1.2 qui propose :

• Nouvelles options de filtre par expression régulière
• Améliorations des rapports de sauvegarde
• bugfixes mineurs

Site Officiel Areca

- Clam Antivirus, qu’on ne présente plus, sort une nouvelle version qui est la 0.95.2.
Cette version améliore le traitement des archives, ajoute le support pour –file-list dans clamscan et clamdscan et corrige divers problèmes dans les versions précédentes.
Site Officiel de Clam Antivirus

- KnowledgeTree est une solution web de gestion documentaire basée sur LAMP (Linux, Apache, Mysql, Php). La dernière version, qui est la 3.6.1, présente ces nouveautés :

• Intégration transparente de Microsoft Office
• Amélioration de la recherche et du moteur d’indexation
• Amélioration de l’API et de l’interface REST pour une meilleure intégration avec d’autre composant
• Amélioration du moteur d’extraction de texte pour de meilleures performances et plus de stabilité.
• Amélioration du système d’installation et de mise à jour.

Site Officiel Communautaire

- Samba, la aussi, je ne pense pas qu’il soit à présenter Lui annonce 2 sortie, la 3.2.12 et la 3.3.5
Il s’agit principalement pour ces 2 versions de corrections de bugs
Site Officiel de Samba

- Zabbix, solution de supervision opensource, dont j’ai déjà parlé ici. Zabbix est désormais en 1.6.4, cette version apporte principalement des corrections de bugs, et quelques petites améliorations.
A noter, que la prochaine version majeure, qui sera la 1.8 devrait sortir en octobre 2009.
Site Officiels de Zabbix

- Centreon, solution de supervision opensource basée autour de Nagios, vient de sortir leur dernière Release Candidate qui est la RC3 pour leur version 2.1 dont j’ai parlé ici
Cette version corrige les bugs de la version RC2.

- Piwik, solution d’analyse de trafics web, dont parle d’ailleurs très bien Framablog
Cette nouvelle version apporte une amélioration du piwik.js, Piwik’s JavaScript tracker.
Site Officiel de Piwik

- MoinMoin Wiki, dont parlais Julien dans cet article
Cette version corrige des failles de sécurité, des bugs, mais apporte également des améliorations notamment concernant les pdf.
Site Officiel de MoinMoin

- MySQL Workbench, outils graphique de modélisation de base de données Mysql, sort en version Release Candidate 5.1.13.
Cette première RC de WorkBench 5.1 apporte son lot de correction de bug, améliore la stabilité, et apporte aussi de nouvelles fonctionnalités mineures.
Site Officiel de Mysql Workbench

Voilà pour cette semaine Bien sur il y a surement des logiciels libres qui sont sortie et que je n’ai pas vu ou ne connais pas

Liens utiles :
Site Officiel de Mysql
Liste des nouveautés
Roadmap MySQL
MySQL 6.0
News sur Freashmet