PHP

Exportation tables Mysql > 2Mo

Recherche :

Mot : Pseudo : Filtrer
Bas de page
Auteur	Sujet : Exportation tables Mysql > 2Mo

fluminis

Bonjour,

Voila je suis webmaster d'un site web qui grossis pas mal ces temps ci.
Et je suis confronté au problème suivant :

Comment exporter une table MySql de 3Mo, quand phpMyAdmin déclare forfait (temps d'execution dépassé)
Et que je suis sur un hebergement mutualisé et que je n'ai acces au serveur au mieux en ftp et sinon en http.
(bref pas de ssh quoi)

Auriez vous déjà rencontré ce problème ?
Comment puisque faire une sauvegarde de cette table ?

Merci d'avance

Fluminis

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

Publicité

jagstang

Pa Capona ಠ_ಠ

ton provider te fourni peut-être mysqldump ?

fluminis

nop helas j'ai echangé un mail avec le support, mais ils ne veulent rien savoir et je n'ai pas acces avec le mysqldump.
Je n'ai qu'acces à php sur le serveur et comme phpMyAdmin, je vais etre confronté à la limite d'execution

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

gizmo

tu ne peux pas changer le max_exec_time?

fluminis

bien... j'ai helas pas acces à la fonction 'exec' donc je ne peut pas lancer le 'mysqldump'

bon bin je vais coder une fonction d'exportation à la main

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

gizmo

je parle des paramètres du php.ini, pas de exec...

fluminis

pas acces non plus au php.ini, je n'ai acces a rien du tout à par excécuter un script php. (hebergement mutualisé)

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

omega2

S'il a pas accés à mysqldump, il a surement pas accés au php.ini .
fluminis > Je crainds qu'en effet la seule solution, c'est de faire un script que t'apelle plusieurs fois d'affilé avec un compteur différent afin qu'il sauve le contenu de la table en plusieurs fois.

fluminis

omega2> ouinnn ! pourquoi moi !
bon bin alors c'est parti pour le script de la mort qui tue.

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

fluminis

Bon voila mon script, c'est surement pas le plus beau script que j'ai jamais fait, je l'ai fait dans l'urgence, mais peu etre que ça servira à quelqu'un donc le voila :

Code :

<?
//Configuration
$file = "export.sql"; //nom du fichier
$nb = 1000; //nombre de lignes à ecrire à chaque fois
$table = "poemes"; //nom de la table à sauvegarder
//mes fonctions de connection à la bdd
//mettez ici mysql_connect et autre truc du genre
include("utils.inc.php" );
if(empty($_GET['ok'])){
//pas d'argument on affiche un lien
$text = "<a href='".$_SERVER['PHP_SELF']."?ok=1&start=0'>Commencer l'exportation</a>";
}else{
$sql = "SELECT * FROM ".$table." LIMIT ".$_GET['start'].",".$nb;
if($_GET['start'] == 0){
//on ecrase le fichier
$fp = fopen($file, 'w');
}else{
//on ecrit à la fin du fichier
$fp = fopen($file, 'a');
fwrite($fp, "#-- ".$_GET['start']."\n" );
}
$i=0;
//execute la requete sql
if($res = mysql_query($sql)){
while($row = mysql_fetch_assoc($res)){
//pour chaque ligne on va l'ecrire dans le fichier
$insert = "INSERT INTO ".$table." (";
$values = " ) VALUES (";
$and = "";
foreach($row as $key => $value){
$insert .= $and . $key;
$values .= $and . "'".mysql_escape_string($value)."'";
$and = ",";
}
$insert .= $values." );\n";
//ecriture dans le fichier
fwrite($fp, $insert);
$i++;
}
}
fclose($fp);
//Qu'affiche t'on ?
if($i == 0){
$text = "Rien d'ecrit. On s'arrete là";
}else if($i < $nb){
$text = $_GET['start']." => ".$i." row(s) écrite(s). On s'arrete là";
}else{
$text = $_GET['start']." => ".$i." row(s) écrite(s).<br/><a href='".$_SERVER['PHP_SELF']."?ok=1&start=".($_GET['start']+$nb)."'>Continuer l'exportation</a>";
}
}
?>
<html>
<body>
<? echo $text; ?>
</body>
</html>

bien sur de nombreuses optimisations pourraient etre faites...

++
fluminis

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

Publicité

jagstang

Pa Capona ಠ_ಠ

change de provider [:jagstang]

Message cité 1 fois

fluminis

jagstang a écrit :

change de provider [:jagstang]

Quelle bonne idée, encore faut il que j'exporte la base de données vers le nouveau, et je reviens au problème initial

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

Djebel1

Nul professionnel

clair que ce provider abuse un peu lol, surtout si tu les as contacté et demandé gentillement

omega2

pourquoi il abuserait?
L'accés à mysqldump ou au php.ini n'est pas un du de base qui devrait être fournis avec le moindre hébergement de site en php.

Aprés tout est une question de prix et de performance, on ne peut pas demander les même supléments sans surcout à un hébergeur gratuit, à un hébergeur payant qu'a des machines de folies, à un hébergeur payant qui laisse ramer les sites pour le même prix que l'autre et à un hébergeur payant qu'est trois fois plus cher que les concurents.

Djebel1

Nul professionnel

non mais lui laisser télécharger ou lui envoyer les fichiers de sa base, si ça fait pas des tonnes de giga, ça me parait pas abusif ^^

Message édité par Djebel1 le 03-02-2006 à 09:05:01

omega2

"Hébergement mutualisé" A ton avis, ca ferait combien de giga justement le total de toutes les bases des sites héberger sur une même machine?

A coup de 2Mo par ci, 15Mo par là, 500ko pour le petit nouveau ... ca peut monter trés trés vite.

IL aurait un ordi que pour lui, alors là oui, ca serait abuser de pas permettre un mysqldump journalier. Mais sur du mutualisé, je trouve abuser de dire que l'hébergeur abuse de ne pas le permettre alors qu'on ne sait même pas qui est son hébergeur ni quelle formule d'hébergement il a choisit.

Message cité 1 fois

gizmo

un simple tracert t'aurais appris qu'il est chez online.net, qui est l'un des pires hébergeurs qui soit [:kiki]

Djebel1

Nul professionnel

omega2 a écrit :

A coup de 2Mo par ci, 15Mo par là, 500ko pour le petit nouveau ... ca peut monter trés trés vite.

ok je m'incline :kaola:

Message édité par Djebel1 le 03-02-2006 à 10:05:34

fluminis

Je suis effectivement chez online.net, mais ne va pas croire que le site dans ma signature est forcement celui pour lequel je pose des questions

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

peter45

Bonjour Fluminis,
d'après ce que je peux lire dans les réponses à ton message, je fais partie de la pire espèce puisque je suis le webmaster de deux sites hébergés chez online et free.

Je viens à l'instant de sauvegarder sur Free la base de données d'un forum : le fichier texte fait un peu plus de 11 Mo ; temps d'exécution de la première sauvegarde : 27 secondes, j'ai recommencé : 17 secondes (phpinfo() sur Free donne ==> max_execution_time 30).

Bien entendu, je n'utilise pas phpmyadmin mais un script PHP que j'ai écrit et qui utilise la librairie bz2.
Je récupère ainsi un fichier compressé .bz2 qui ne fait que 2,7 Mo. Tu peux de rendre compte que le gain de compression est important.

Si l'exécution du script dépasse le temps alloué par le serveur, il suffit de l'améliorer pour présélectionner certaines tables afin de fractionner la sauvegarde en plusieurs étapes. Cela ne m'est jamais encore arrivé.

Pour le décompresser sous Windows, j'utilise l'excellent freeware Izarc.
Voici le début de ce script (je n'ai pas encore prévu de le distribuer, mais les lignes suivantes contiennent l'essentiel) :

Code :

<?php
require("../passe/conf.php" );
$db_link = mysql_connect($sql_serveur,$sql_user,$sql_passwd);
$rep_sauve = "secret";
$rep = $rep_sauve."/";
$nom_fichier = $rep.$sql_bdd."_".date('Y_m_d_H_i_s').".bz2";
$fp = bzopen($nom_fichier, "w" );
// Récupération de l'heure
$datej = strftime("%A %d %B %Y à %H:%M:%S ",time());
$en_tete = "
# Serveur : ".$_SERVER ['SERVER_NAME']."\n
# Généré le : ".$datej."\n
# Version de PHP : ".phpversion()."\n
# Base de données : `".$sql_bdd."`\n
";
$base = mysql_list_tables($sql_bdd);
$nbre_tables = mysql_num_rows($base);
$en_tete .= "# Nombre de tables sauvegardées : ".$nbre_tables."
\n#\n";
bzwrite($fp, $en_tete);
bzwrite($fp, $heure."\n" );
for ($tb = 0; $tb< $nbre_tables; $tb++)
{
$nomTable = mysql_tablename($base, $tb);
$request = "SHOW CREATE TABLE`".$nomTable;
$result = mysql_db_query($sql_bdd, $request, $db_link);
$affiche = mysql_fetch_array($result);
$structure = $affiche[1].";\n";
$structure = str_replace("CREATE TABLE", "CREATE TABLE IF NOT EXISTS", $structure);
bzwrite($fp,"................etc.

Message édité par peter45 le 03-02-2006 à 20:27:56

fluminis

Merci pour le script je prends et vais faire les modifs sur le miens en consequence

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

fluminis

Ce topic est vieux comme le monde, mais bon...
Je le r'ouvre juste pour dire que j'ai finalement trouvé un script de sauvegarde de base de données très efficace :
http://www.webcron.org/webcronsave.php
avis aux amateurs
++

---------------
http://poemes.iceteapeche.com - http://www.simuland.net

squal le requin

il est super ce script, je suis en train de le tester mais dans la configuration je ne peux pas choisir l'heure ni rien, pourtant dans la documentation ça y est :??:

Publicité

FORUM HardWare.fr

Programmation

PHP

Exportation tables Mysql > 2Mo

Sujets relatifs
[JBOSS et MySql] Pb de configuration	comparaison de tables en vue de faire un historique
[MySQL] problème avec la clause IN	[MySQL] Problème d'indexation FullText
[PHP/MYSQL] création d'un service de blog	[SQL Server] Listes des tables d'une base
importer une bases .sql vers mysql sur easyphp	[Résolu]Requete soustractive MySQL ?
Rappatrier une BDD MySQL ...	Requêtes avec mysql sur 2 tables
Plus de sujets relatifs à : Exportation tables Mysql > 2Mo

Page générée en 0.083 secondes