Le blog d'un geek qui n'en est pas un !

Sauvegarder vos bases de données MySQL

Fred — Thu, 06 Oct 2011 16:59:00 +0200

Voici un petit script bash que vous placerez dans un cron pour sauvegarder vos bases de données. Pour une exécution toutes les heures, ce script :

Garde un historique des modifications heure par heure pour les deux dernières semaines avec rdiff-backup
Créer un fichier dump .sql par tables par bases de données
Garde un backup journalier compressé avec gzip

Prérequis

Le seul prérequis est rdiff-backup.

Configuration

Il nécessite toutefois un brin de configuration.

IGNOREDB : Les bases de données à ignorer séparées par un espace
DIR : Le répertoire où sauvegarder les données avec le / final
USER : L'utilisateur MySQL
PWD : Son mot de passe (peut être vide si aucun)
HOST : Le serveur MySQL

Script de sauvegarde MySQL

Certain apprécierons (dont moi-même) moyennement le mot de passe en clair dans le script, mais libre à vous de trouver une autre solution et surtout de créer un utilisateur avec des permissions limitées.

Voici la bête :

#!/bin/bash

# Databases to ignore, separated by a space or pipe
IGNOREDB="mysql information_schema innodb"
DIR='/backup/databases/' 		# With trailing slash
USER='backup'
PWD=''
HOST=''

if [[ -z "$PWD" ]] 
then
	DATABASES=`mysql -h "$HOST" -u$USER -e "SHOW DATABASES;" | tail -n+2` 
else
	DATABASES=`mysql -h "$HOST" -u$USER --password=$PWD -e "SHOW DATABASES;" | tail -n+2` 
fi

IGNOREDB=`echo "$IGNOREDB" | tr ' ' '|'`
DATABASES=`echo "$DATABASES" | grep -v -E "^$IGNOREDB$"`

for DB in $DATABASES; do

	DBDIR="$DIR$DB"
	mkdir -p "$DBDIR"

	if [[ -z "$PWD" ]] 
	then
		TABLES=`mysql -h $HOST -u$USER -e "SHOW TABLES FROM $DB;" | tail -n+2`
	else
		TABLES=`mysql -h $HOST -u$USER -p$PWD -e "SHOW TABLES FROM $DB;" | tail -n+2`
	fi

	TBLDATE=`date +%Y-%m-%d`
	DUMPDIR="$DBDIR/last"
	mkdir -p "$DUMPDIR"

	for TBL in $TABLES; do
		
		TBLFILE="$DUMPDIR/$TBL.sql"
		if [[ -z "$PWD" ]] 
		then
			mysqldump -h "$HOST" -u$USER "$DB" "$TBL" > "$TBLFILE"
		else
			mysqldump -h "$HOST" -u$USER -p$PWD "$DB" "$TBL" > "$TBLFILE"
		fi

	done

	RDIFFDIR="$DBDIR/rdiff"
	mkdir -p "$RDIFFDIR"
	rdiff-backup "$DUMPDIR" "$RDIFFDIR"
	rdiff-backup -v0 --force --remove-older-than 2W "$RDIFFDIR"

	INCRDIR="$DBDIR/increments/$TBLDATE"
	mkdir -p "$INCRDIR"
	cp "$DUMPDIR/"* "$INCRDIR"
	gzip -fq "$INCRDIR/"*

done

Condition dynamique sur un modèle associé

Fred — Sat, 27 Aug 2011 03:32:00 +0200

Lors d'une association telle que hasMany, il est parfois souhaitable de placer des conditions de recherche sur les données associées. Ceci n'est pas faisable directement.

Prenons par exemple un modèle Post ayant beaucoup de Commentaires. Nous souhaitons récupérer tous les Posts où Fred a posté un commentaire.

Avec le snippet suivant, nous allons utiliser un faux champ 'auteur_commentaire' dans nos conditions et dynamiquement faire le travail pour ne retourner que les résultats souhaités.

function beforeFind($query) {

	$auteur_commentaire = false;
	if (isset($query['conditions']['auteur_commentaire'])) {
		$supplier = $query['conditions']['auteur_commentaire'];
		unset($query['conditions']['auteur_commentaire']);
	} elseif (isset($query['conditions'][$this->alias . '.auteur_commentaire'])) {
		$supplier = $query['conditions'][$this->alias . '.auteur_commentaire'];
		unset($query['conditions'][$this->alias . '.auteur_commentaire']);
	}
	if ($auteur_commentaire) {
		$postIds = $this->Commentaire->find('list', array('conditions' => array('Commentaire.auteur' => $auteur_commentaire), 'fields' => array('id', 'post_id')));
		$query['conditions'][$this->alias . '.id'] = $postIds;
	}
	
	return $query;
}

Concrètement nous analysons si la condition auteur_commentaire existe. Si oui, récupérons tous les IDs de posts associés à cet auteur dans la table des commentaires. Ensuite nous rajoutons à notre recherche initiale la condition stipulant les IDs possibles pour les Post. Ceci fait en toute transparence dans votre modèle.

Attention toutefois qu'en terme de performance cela peut devenir une grosse requête lorsqu'il y a plusieurs dizaines de milliers de post associés.

Gestion des permissions Acl dans CakePHP 2.0

Fred — Fri, 19 Aug 2011 22:16:00 +0200

Mettre en place la gestion des Acl est déjà bien complexe, y gérer les permissions aussi. C'est pourquoi j'ai développé un plugin pour CakePHP 2.0 qui vous facilitera la tâche.

N'hésitez pas à me donner vos commentaires, remarques ou bugs découverts.

Les sources et instructions se trouvent sur le dépôt Github suivant :

Download ACL Manager pour CakePHP 2.0

Alias et VirtualFields dans CakePHP

Fred — Thu, 18 Aug 2011 16:11:00 +0200

Dans CakePHP 2.0 (beta à la date d'aujourd'hui), avoir des VirtualFields peut générer des erreurs lorsqu'un modèle change d'alias.

Pour remédier à ce problème, voici un petit bout de code à placer dans AppModel.

public function getVirtualField($field = null) {
	if (!empty($field) && $this->isVirtualField($field)) {
		if (strpos($field, '.') !== false) {
			list($model, $field) = explode('.', $field);
		}
		return str_replace('{alias}', $this->alias, $this->virtualFields[$field]);
	} else {
		return parent::getVirtualField($field);
	}
}

Ensuite, spécifiez vos virtualFields de la manière suivante :

var $virtualFields = array(
  'name' => "CONCAT({alias}.first_name, ' ', {alias}.last_name)"
);

Ce qui dynamiquement donnera ceci :

var $virtualFields = array(
  'name' => "CONCAT(User.first_name, ' ', User.last_name)"
);

Edit #1 : Gestion du . dans le nom du champ passé à la fonction.

La page Facebook de Jesus

Fred — Wed, 25 Aug 2010 16:13:00 +0200

Et si Jesus Christ avait eu Facebook en son temps !

Source

On sait qu'on est geek quand...

Fred — Tue, 10 Aug 2010 01:38:00 +0200

C'est là qu'on voit qu'on est geek.

Le baraki à la mer

Fred — Sun, 18 Jul 2010 11:39:00 +0200

La mer, bel endroit paisible où il fait bon se reposer. C'est aussi l'endroit stratégique pour observer un spécimen belge. Le baraki. Cette espèce s'est éparpillée en Belgique, et même si certains points de regroupement sont évidents il est recommandé de suivre leurs migrations pour les observer.

Pendant les périodes où les enfants et l'homme sont en congés, la femme ne travaillant pas, et où le soleil se montre, les familles de barakis émigrent à la côte belge. J'ai eu l'occasion d'observer un groupe de près dans un transport en commun.

Le baraki se doit toujours d'être accompagné d'une myriade de mioches. Leadés par les enfants turbulents, reconnaissables aux traces de "choco" présentent sur leurs joues, les parents suivent avec les enfants en bas-âge.

J'aperçois la mère. Descriptible comme un assemblement difforme de masse graisseuse dont on distingue un visage surplombé de quelques cheveux... visage qui laissera apparaitre une délicate moustache et quelques poils habituellement répartis à d'autres endroits du corps. Ses jambes ne s'arrêtent pas à ses fesses mais se prolongent jusqu'à ses hanches de manière uniforme. On remarquera aussi, non négligeable, la peau du haut du dos allant du brun au rose bébé suite à une exposition au soleil mal évaluée.

Le baraki aime rigoler. Ils m'ont donné la joie d'admirer leurs échangent de sourire. Celui de la mère est formé de dents (distinction importante !) dont la couleur penche entre le jaune pale et l'orange. Chacune des dents est reliée à la suivante grâce à une jointure constituée d'un dépôt dont seuls les barakis ont le secret.

De l'autre côté de ce sourire appétissant celui de la belle-mère qui s'était préalablement déposée sur deux sièges. Cette dernière répond d'une autre manière en laissant fièrement apparaitre sa dernière incisive. Il faudra se concentrer sur la forme de ses lèvres pour déceler l'expression de son sourire. La belle-mère a perdu la parole, et son fils. En effet, la belle-mère accompagnera volontiers la meute pendant la migration, mais la présence du mari n'est pas toujours requise lors des expéditions quotidiennes. Il préfèrera généralement regarder un film pornographique en vidant un casier.

Ayant probablement perdu la parole en avalant ses dents, la belle-mère ne dira pas un mot durant le trajet. Pour la reconnaitre, cherchez une boule, un regard vitreux cherchant quelque chose sur lequel focaliser son attention et dont les seins s'étalent de tout leur long sur son ventre rond.

Le baraki est toujours accompagné d'une autre meute lorsqu'il émigre. Cette autre meute peut généralement être difficile à reconnaitre car ils tentent de prendre l'apparence du sapiens. Il faudra écouter leur propos pour les identifier.

Je vous invite à les observer par vous-même, rare moment mêlant fascination et profond dégout.

Ajouter un mois à une date en PHP

Fred — Tue, 13 Jul 2010 21:47:00 +0200

Ne criez pas trop vite qu'il s'agit d'une fonction simple ! La fonction strtotime est certainement très intéressante, mais elle ne fait pas tout !

Démonstration

Nous sommes le 15 janvier. J'utilise strtotime("+1 month"), je me retrouve donc au 15 février. Jusque là tout va bien. Mais si nous sommes le 31 janvier...

Dans ce cas, strtotime va renvoyer le 3 mars (selon l'année). Voici une fonction qui prendra en compte le dernier jour du mois suivant si le mois ne comporte pas assez de jours.

Fonction PHP pour incrémenter une date

function getNextDate($type = null, $now = null, $start = null) {

	if (is_null($now)) return false;

	if (!is_numeric($now)) $now = strtotime($now);
	if (!is_null($start) && !is_numeric($start)) $start = strtotime($start);
	
	switch($type) {
		
		/**
		 * Rajouter un mois à $now en tenant en compte que $start est le tout début
		 */
		case "month":
		case "monthly":
			
			if (!is_null($start)) {
				$day = date("j", $start);
			} else {
				$day = date("j", $now);
			}
				
			switch($day) {
				case 29:
				case 30:
				case 31:
					$next = strtotime("next month", mktime(0, 0, 0, date("m", $now), 1, date("Y", $now)));
					$lastDay = date("t", $next);
					$next = mktime(0, 0, 0, date("m", $next), $lastDay, date("Y", $next));
					break;
					
				default:
					$next = strtotime("+1 month", $now);
					break;
			}
				
			break;				
			
	}
	
}

Je n'ai pas encore écrit la suite de la fonction permettant d'obtenir une date futur selon un autre $type, mais ça devrait suffire.

Utilisation

$timestamp = getNextDate($type, $now, $start);

@param String $type Le type de calcul (uniquement month pour l'instant)
@param Int $now Le timestamp de la date à partir de laquelle on calcule la prochaine
@param Int $start La date de départ
@return Int Timestamp de la date retournée

$start est utile lorsque dans une boucle vous cherchez à obtenir plusieurs mois suivants.

Exemple, si vous commencez au 30 janvier. $now sera le 30 janvier, et $start sera null. La date retournée sera le 28 février. Pour la prochaine date vous indiquerez le 28 février comme étant $now, et $start le 30 janvier. Si vous omettez $start, la valeur retournée sera le 28 mars, sinon elle sera le 30 mars.

Un film en carton, et pourtant...

Fred — Thu, 01 Jul 2010 19:01:00 +0200

Voici une belle façon de faire ses preuves au niveau des effets spéciaux !

Source

Pensée obscure

Fred — Wed, 30 Jun 2010 19:20:00 +0200

Superman
Unique
Idolâtré

Crac !

Incompris
Décomposé
Exterminé

Descend de ton pied d'estal petit enfant,
Tu n'as plus lieu d'y être,
Maintenant plus personne n'en a besoin,
Tu peux redevenir toi-même.

Apprends à vivre,
Non plus à survivre,
Tu as toi aussi une vie,
Et tu mérites de la connaitre.

Du futur tu rattraperas,
Les années passées,
A te mettre de côté,
A accepter.

Affirme-toi,
Crois en toi,
Réussis,
Et perdure !

De ces expériences,
De ces malheurs,
De ces manques,
Tu tireras parti.

Croît enfin,
petit adulte.

Article initialement posté le 21 septembre 2008

L'iPhone rend dépendant !

Fred — Fri, 25 Jun 2010 10:11:00 +0200

Pas vrai ?

Mon précieux !

Vous ne regarderez plus les gens qui jouent avec leur iPhone de la même manière !

Source

WindMaker : Un site soufflé !

Fred — Thu, 24 Jun 2010 11:51:00 +0200

Après Pong, voici comment reproduire les conditions venteuses d'une région des Etats-Unis sur un site. Ca sert à rien, mais j'adore !

FMCorz soufflé !

WindMaker

Un Pong Deluxe !

Fred — Wed, 23 Jun 2010 11:27:00 +0200

Bon, j'en fais peut-être un peu trop, mais voilà enfin une utilisation amusante et intéressante des "Popups" !

Jouer à Pong (n'oubliez pas d'autoriser les popups !)

Source

Créer des URLs raccourcies

Fred — Mon, 21 Jun 2010 12:22:00 +0200

Vous aussi vous voulez proposer votre système d'URLs raccourcies comme bit.ly ? C'est pas bien compliqué ! Voici un point de départ.

Réduire une chaine de caractères

Il y a plusieurs méthodes possibles pour raccourcir une URL. Vous pouvez vous amuser à créer une algorithme de compression de chaine, mais il y a plus simple. Sur une base plus ou moins aléatoire, un nombre quelconque, vous allez récupérer une chaine de caractères.

L'idée est d'encoder le nombre sur une base de 62 caractères (de "a" à "Z" et de "0" à "9"), soit comme en hexadécimal, mais avec les majuscules en plus. On pourrait rajouter un caractère ou l'autre, mais j'ai choisi de rester dans les caractères alphanumériques.

Pourquoi ne pas encoder en Base64

Base64 est conçu pour gérer tout type de caractères, du coup l'encodage prend plus d'espace et ne nous est d'aucune utilité.

Méthodologie

C'est bien de pouvoir obtenir une chaine sur base d'un nombre, mais comment on l'utilise. Trois options s'offrent à vous.

La première consisterait à récupérer l'ID de votre URL enregistrée en base de données, et de le convertir en Base62. Ca permet d'avoir une chaine unique à chaque enregistrement, mais ne rend pas la génération de la chaine aléatoire.

Une autre méthode consiste à générer un nombre sur une base connue. Par exemple un Timestamp accompagné d'un nombre aléatoire, en vous assurant que le nombre soit bel et bien unique. Avec cette méthode, il est possible que votre chaine raccourcie ne soit pas aussi courte qu'elle pourrait l'être.

La dernière méthode consiste à générer une chaine aléatoirement, et de vérifier ensuite qu'elle n'a pas déjà été utilisée. Cette méthode peut nuire aux performances du serveur si plusieurs fois de suite la chaine a déjà été utilisée.

Fonctions de compression de nombre

Voici la fonction toute simple d'encodage (et décodage) en Base62.

Base62 en PHP

function base62e($n, $chr = "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789" ) {
	$n = intval($n);
	$base = strlen($chr);
	$chars = "";
	while ($n > 0) {
		$mod = $n % $base;
		$n = intval($n / $base);
		$chars = $chr[$mod] . $chars;
	}
	return $chars;
}

function base62d($chars, $chr = "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789") {
	$base = strlen($chr);
	$nb = strlen($chars);
	$puis = $nb -1;
	$sum = 0;
	for($i = 0; $i < $nb; $i++) {
		$char = $chars[$i];
		$val = strpos($chr, $char);
		$sum += $val * pow($base, $puis--);
	}
	return $sum;
}

Base62 en Python


chr = "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789"

def base62e(n):
	n = int(n)
	base = len(chr)
	chars = ""
	while n > 0:
		mod = n % base
		n = n / base
		chars = chr[mod] + chars
	return chars

def base62d(chars):
	chars = str(chars)
	base = len(chr)
	puis = len(chars) - 1
	sum = 0
	for c in chars:
		val = chr.find(c)
		sum += val * (base ** puis)
		puis -= 1
	return sum

Remarques

J'ai fait ça vite fait, il existe peut-être des fonctions existantes permettant d'arriver au même résultat, je n'en sais rien mais je serais ravi de l'apprendre. De même pour la méthodologie, si vous avez d'autres pistes ou idées, faites-m'en part !

Redimensionner une image et l'envoyer (Script Nautilus)

Fred — Sun, 20 Jun 2010 16:16:00 +0200

Je m'amuse quelque peu avec mon shell ce que je n'avais jamais vraiment pris le temps de faire auparavant. Je sais qu'il existe des tonnes des scripts pour Nautilus, mais j'avais envie de faire le mien, certainement pas optimisé, bourré de bugs, mais on apprend mieux avec du concret qu'avec des pages du manuel !

Envoyer une image redimensionnée avec Nautilus

Prérequis

Le script requiert les paquets imagemagick et nautilus-sendto.

sudo apt-get install imagemagick nautilus-sendto

Créer le script

Déplacez-vous dans le répertoire ~/.gnome2/nautilus-scripts/ et créez un fichier du nom que vous souhaitez, personnellement je l'ai appelé Resize and send picture. Ensuite permettez son exécution.

cd ~/.gnome2/nautilus-scripts
touch "Resize and send picture"
chmod +x "Resize and send picture"

Le script en question

Voici le code à placer dans le fichier :

#!/bin/bash
printf %s "$NAUTILUS_SCRIPT_SELECTED_FILE_PATHS" |
while read -r FICH
do
  if [ -f "$FICH" ]; then
  	NAME=`basename "$FICH"`
  	convert -resize 500x "$FICH" "/tmp/$NAME"
  	if [ -f "/tmp/$NAME" ]; then
  		nautilus-sendto "/tmp/$NAME" &
  	fi
  fi
done

Enjoy !

Cliquez droit sur n'importe quel fichier image, un double redimensionné à 500 pixels de large sera créé dans votre répertoire temporaire et son envoi sera proposé via Nautilus.

Pistes d'amélioration

Supprimer le fichier temporaire après l'envoi
Choisir la taille de l'image
Grouper les différents fichiers sélectionnés dans une archive

Thème de Super Mario en Beatbox

Fred — Fri, 18 Jun 2010 20:02:00 +0200

Impressionnante prestation de beatboxing de l'air de Super Mario Bros.

Source

Fatal, le nouveau film de Michaël Youn

Fred — Thu, 17 Jun 2010 17:52:00 +0200

J'étais plein d'a priori comme tout le monde, c'est vrai que Youn n'a pas toujours un humour qui fait rire (tout le monde). Mais après avoir vu plusieurs bande-annonce et les "5 premières minutes du film", j'ai été conquis !

Critique de Fatal

Certes, ce film ne casse pas la baraque, mais pour une comédie je la trouve particulièrement réussie ! C'est à travers un tas de clins d'oeil que l'on suit l'évolution de Fatal, rappeur #1 imbu de sa personne, devant faire face pour la première fois à un concurrent de taille, Stéphane Rousseau aka Chris Prolls !

Le fond sonore laisse prédire la sortie d'un album dans les semaines qui viennent. D'ailleurs les paroles des chansons me plairont toujours autant que "Mauvaise foi nocturne" ou "Fous ta cagoule!". J'aime aussi particulièrement "Fuck You" de Chris Prolls, un fond électro et des paroles ridicules, j'aime !

Parodiant Paris Hilton, les enfoirés, M6 (ou W9 comme vous voulez), ce film m'a plu et je vous invite à aller le voir !

Les 5 premières minutes de Fatal

Fuck You, de Chris Prolls

C'est la fête dans mon slim, Chris Prolls

Fatal Bazooka, Moi je veux du Uc, le clip

Fatal Bazooka, Ce matin va être une pure soirée, le clip

Fatality, l'odeur de moi !

Liens extra de Fatal

Webmin ou administrer son serveur

Fred — Mon, 07 Jun 2010 17:57:00 +0200

Webmin est un utilitaire permettant de faciliter les tâches d'administration les plus courantes de votre serveur.

Installer Webmin

Vous pouvez l'installer avec un paquet téléchargeable depuis le site officiel, mais c'est bien plus drôle si vous pouvez le mettre à jour.

Ajoutez la ligne suivante à votre /etc/apt/sources.list.

deb http://download.webmin.com/download/repository sarge contrib

Ensuite tapez les commandes suivantes :

wget -q http://www.webmin.com/jcameron-key.asc -O- | sudo apt-key add -
sudo apt-get update
sudo apt-get upgrade

Il ne vous reste plus qu'à vous connecter à https://votredomaine.com:10000. Identifiez-vous en root ou équivalent.

Jessica Biel

Fred — Sun, 06 Jun 2010 16:18:00 +0200

YouTube se fout de ma gueule !

Fred — Sun, 23 May 2010 16:51:00 +0200

Euh... pourquoi quand j'ai essayé d'ouvrir mon compte YouTube j'ai un joli message d'erreur... du genre "Je me fous de ta gueule" ?!

while(1);{"errors": "C'est une entourloupe", "success": false}

Pourtant mon identification s'était bien produite, même si j'ai du chipoter pour voir le média qui était réservé à des utilisateurs "avertis"...