PHP

réalisation d'un bot: automatisation d'une requête

Recherche :

Mot : Pseudo : Filtrer
Page : 1 2 Page Suivante Page Précédente Bas de page
Auteur	Sujet : réalisation d'un bot: automatisation d'une requête

pmusa

▓▓▓▓▓▓▓

Bonjour,

Dans le cadre d'un petit délire personnel (projet très secret confidentiel ), j'aimerai créer un bot qui automatisera une tache sur un site que je consulte assez regulièrement.
Je me suis abondamment documenté et ça tourner principalement autour d'une seul fonction: fsockopen.
en revanche cette page contient un formulaire, suivi d'un AUTRE formulaire (qui à besoin du premier) et, enfin ( :sweat: ), une page de traitement.
J'en ai donc déduis qu'il fallait forcément envoyer (et peut-être recevoir non? :??: ) des headers POST et/ou GET... or je ne sais pas comment on se débrouille.
Ensuite il me sera necessaire de récuperer dans le 2ème formulaire le lien d'une image qui pointe sur http://www.lesite.net/index.php?ru [...] wet=tarzan
J'ai besoin de récuperer uniquement la valeur de $cat, ici 645123 et l'envoyer ensuite en POST pour la page de traitement.

Pourriez-vous me dresser la liste des fonctions qui me seront capitales? pour le reste, je saurai me demerder. et au besoin je repasserai [:aras qui rit]

merci à vous. :jap:

Message édité par pmusa le 25-07-2005 à 09:55:44

Publicité

cesarr89

Et cURL ca pourrait pas te servir par hasard :??:

pmusa

▓▓▓▓▓▓▓

je connais pas CURL et mon serveur ne gère pas de toute façon. [:airforceone]
je sais que ça peut se réaliser via PHP, j'ai lu des sources de script. ( en POO )

:jap:

cesarr89

non mais cURL c'est juste 1 ou 2 include dans ton PHP donc pourquoi tu me raconte que ton serveur gère pas?

pmusa

▓▓▓▓▓▓▓

bah je dois surement confondre avec un autre. :??: mais je crois que j'peux pas utiliser CURL sur mon serveur.
de toute façon je connais pas ce truc, oublie. [:bambookillah]

moi je veux me le faire avec du php.

cesarr89

Bah oui mais justement, avec cURL tu le fais toujours en PHP.
Tu dois pas comprendre ce qu'est cURL.

Edit: tu peux même compiler PHP avec cURL, du coup ta plus de include à faire.

Edit2: http://www.nexen.net/docs/php/annotee/curl.intro.php

Message édité par cesarr89 le 25-07-2005 à 10:19:09

pmusa

▓▓▓▓▓▓▓

ouè mais non, je connais pas ce truc. désolé de t'embêter. Si je le fait avec CURL je vais poser plein de questions. moi j'veux péachpèèè. :cry:

cesarr89

Et ca, c'est bon ou pas?
http://www.nexen.net/docs/php/annotee/ref.http.php

pmusa

▓▓▓▓▓▓▓

non.

Code :

<?php
$fp = fsockopen("http://www.lesite.com/dir/formulaire2.php", 80, $errno, $errstr, 30);
if (!$fp) {
echo "$errstr ($errno) \n";
} else {
$out = "POST / HTTP/1.1\r\n";
$out .= "Connection: Close\r\n\r\n";
fwrite($fp, $out);
while (!feof($fp)) {
echo fgets($fp, 128);
}
fclose($fp);
}
?>

là, avec $out, j'aimerai lui envoyer une variable en method POST: $id, aui aurai la valeur 123

comment procéder?

$out .= "id: 123\r\n\r\n";
:??:

merci

cesarr89

Bah utilise le lien que je t'ai filé, c'est obligé que ca te convienne là

Publicité

pmusa

▓▓▓▓▓▓▓

non ça n'a rien à voir. [:airforceone]

cesarr89

Si tu le dis....dans ce cas là je peux pas t'aider plus.

pmusa

▓▓▓▓▓▓▓

merci quand même hein. :jap:

cesarr89

de rien.

pmusa

▓▓▓▓▓▓▓

rebonsoir, :jap:

pour l'instant je me demerde un peu et j'essaye de mettre en oeuvre tout le charabia que j'ai acquis en poo php.
j'ai fais ça sur papier et je vais bientôt le saisir avec mon editeur de texte. je suis asses satisfait.

l'ultime problème que je me pose:

étant donné que je dois accéder à 3 pages au total, et que chacune dépend de la précedente (je rappel l'ordre: 1. indentification via login espace membre, 2.soumission d'un formulaire, 3. accès à la seconde partie du formulaire pour valider avant de recuperer le lien d'une image qui y réside),
je me demande donc comment les synchroniser. en fait pour acceder au formulaire je dois être LOGGUE, et si j'envoie des entêtes à la pages d'identification puis à la page du formulaire, il me dit que je suis tjrs pas connecté.

dois-je utiliser la meme ressource issue du fsockopen pour accéder au formulaire pour qu'il "mémorise" mes identifiants et passe au traitement du formulaire??

ptain chui pas clair.
dites moi au moi si je me fais comprendre.

A+

gatsusat

perso ca ne passera jamais ton système, puisque si le site utilise le système des cookies et tout le tralala, en PHP tu n'arriveras jamais à obtenir ce que tu recherches à faire

micfont999

Simplement Moi

Soit généralement des bot en C comme le font les modo sur ce site

pmusa

▓▓▓▓▓▓▓

Si si je peux "renseigner" mon cookie au site.
via le header:
Cookie: mavar1=mavaleur1; mavar2=mavaleur2; mavarN=mavaleurN;

il suffit juste de savoir quelles sont les couples clef/valeur que ledit site t'envoie (ce qui est ok en ce qui me concerne) et ça tourne. :jap:

j'ai fait des tests là enocre et j'arrive à me connecter sans problème sur mon espace membre. :sol: par contre je ne sais pas comment enchainer l'accès au formulaire. si il faut utiliser la même resource du socket sans la fermet ou peut-être juste essayer d'envoyer mes cookies, etc...

personne n'aurait une idée?? :??:

pmusa

▓▓▓▓▓▓▓

ça peut vous aider si je post le code? (up caché)

micfont999

Simplement Moi

va y toujours ^^

pmusa

▓▓▓▓▓▓▓

donnez moi... 60 minutes. :whistle:

:jap:

pmusa

▓▓▓▓▓▓▓

Code :

<?php
class socket{
var $serveur;
var $port;
var $page; #page à traiter
var $methode; #GET ou POST
var $moncookie; #couple clef/valeur de mon cookie
var $post; #requete POST à soumettre
var $headers = array(); #headers reçus
var $cookie_recep = array(); #cookies reçus
function __construct($serveur,$port){
$this->serveur = $serveur;
$this->port = $port;
echo "constructeur ok! \r\n";
}
function url_post($page,$vars){
$this->page = $page;
$this->methode = 'POST';
echo "url_post ok! \r\n";
$this->req($vars);
}
function req($vars){
$req='';
if(is_array($vars)){
foreach($vars as $clef => $valeur){
$req .= urlencode($clef).'='.urlencode($valeur).'&';
}
$req = substr($req,0,-1); #pour kicker le char & en fin d'url
}
else{
$req = $vars;}
$this->post = $req;
echo "req ok! \r\n";
}
function envoi_req(){
$envoi= "$this->methode $this->page HTTP/1.1\n" .
"Host: {$this->serveur}\n" .
"User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; fr-FR; rv:1.7.10) Gecko/20050717 Firefox/1.0.6
\n" .
"Accept: text/xml,application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5
\n" .
"Accept-Language: fr,fr-fr;q=0.8,en-us;q=0.5,en;q=0.3\n";
if(isset($this->moncookie)){
$envoi .= "Cookie: ";
foreach($this->moncookie as $clef => $valeur){
$envoi .= "$clef={$valeur}; ";}
}
$envoi = substr($req,0,-1); #kicker le char ;
$envoi .= "\r\n";
if(isset($this->post)){
$envoi .= "Content-type : application/x-www-form-urlencoded\n".
'Content-Length : ' . strlen($this->post) . "\n";
}
echo "envoi req ok! \r\n";
return $envoi . "\r\n";
}
function definir_moncookie($array){
foreach($array as $clef => $valeur){
$this->moncookie[$clef] = $valeur;}
echo "envoi cook ok! \r\n";
}
function execute(){
if(!$fp = @fsockopen($this->serveur,$this->port,$errno,$errdescr)){
echo 'echec connexion à '. $this->serveur . ' via le port ' . $this->port . '. Erreur récupérée: ' . $errno . ' - ' . $errdescr;
return false;
}
else{
echo "connex ok! \r\n";
socket_set_timeout($fp,30);
$req = $this->envoi_req();
fputs($fp,$req);
while(!feof($fp)):
$ligne = fgets($fp,4096);
#echo $ligne;
if(preg_match("#HTTP/([a-zA-Z0-9]+) ([0-9]{3}) (.+)#", trim($ligne), $infos)){
$this->headers['http-version'] = $infos[1];
if(in_array((int)$infos[2], array(100, 200, 201, 302, 307))){
echo "requête effectuée avec succès. \r\n"; #ouf
}
}
if(preg_match('`([^:]+?) :\s*(.+)`', $ligne, $get)){
if(isset($this->headers[strtolower($get[1])])){
if(is_array($this->headers[strtolower($get[1])])){
$this->headers[strtolower($get[1])][] = trim($get[2]);
}
else{
$this->headers[strtolower($get[1])] = array($this->headers[strtolower($get[1])], trim($get[2]));
}
}
else{
$this->headers[strtolower($get[1])] = trim($get[2]);
}
}
endwhile;
if(isset($this->headers['set-cookie'])){
foreach($this->headers['set-cookier'] as $valeur){
if(preg_match('`([^=]+?)=([^;]*)`', $valeur, $recup)){
$this->recep_cookie[$recup[1]] = array('valeur' => $recup[2]);
}
if(preg_match('`expires=(.+)`', $valeur, $enreg)){
$this->recep_cookie[$recup[1]]['expires'] = strtotime($enreg[1]);
}
}
}
}
}
}
?>

je DEBUTE la POO, soyez indulgent.

Message édité par pmusa le 30-07-2005 à 10:13:02

esox_ch

Et c'est quoi le probleme?

---------------
Si la vérité est découverte par quelqu'un d'autre,elle perd toujours un peu d'attrait

pmusa

▓▓▓▓▓▓▓

le problème c'est que j'arrive à me connecter sans problème ( ) à mon interface membre, mais qu'après je ne peux pas accéder au formulaire sous pretexte que je ne suis pas loggué. :pt1cable:
bizarre, n'est-il pas?

pmusa

▓▓▓▓▓▓▓

je me suis expliqué clairement, j'ai montrer des efforts de mon côté, en POO qui plus est, alors pitié... sortez moi de là.

esox_ch

Ce que je fais quand ce genre de truc merde :
Je fais le parcours avec FF une fois en enregistrant tout les packets envoyés avec ethereal ou un plugin, et apres je comparre a ce que mon bot envoie ... A la fin tu t'en sors toujours

---------------
Si la vérité est découverte par quelqu'un d'autre,elle perd toujours un peu d'attrait

pmusa

▓▓▓▓▓▓▓

ah ué pas kon.
t'as des noms de plugins là?

esox_ch

Je crois que c'est LiveHTTPHeaders ou un truc du genre ...

---------------
Si la vérité est découverte par quelqu'un d'autre,elle perd toujours un peu d'attrait

ritzle

micfont999 a écrit :

Soit généralement des bot en C comme le font les modo sur ce site

qu'est ce que tu veux dire ?

esox_ch

Que plusieurs modo (et non modo) ont des robot qui parcourrent le forum ...

---------------
Si la vérité est découverte par quelqu'un d'autre,elle perd toujours un peu d'attrait

pmusa

▓▓▓▓▓▓▓

ok je vais téléchargé ça... en même temps que FF d'ailleursalors. chui pas sur mon pc (HS)

en attendant, grosse connerier qui m'empêche de progresser:

Bad Request
Your browser sent a request that this server could not understand.
client sent HTTP/1.1 request without hostname (see RFC2616 section 14.23): /mon_chemin/absolument_correct_pourtant/la_page.php

pmusa needs you.

ritzle

esox_ch a écrit :

Que plusieurs modo (et non modo) ont des robot qui parcourrent le forum ...

et c'est pour faire quoi ces robots ?

pmusa

▓▓▓▓▓▓▓

pour éviter qu'on dérive du sujet et qu'on m'aide à tourver une soluce. :hello:

supeyyr le plug-in. [:dawa]

j'envoi rien apparemment... 'comprend plus rien. [:antp]

esox_ch

Regarde dans le RFC correspondant ... a mon avi tu as foiré ta requete de GET

---------------
Si la vérité est découverte par quelqu'un d'autre,elle perd toujours un peu d'attrait

Harkonnen

Modérateur
Un modo pour les bannir tous

Ethereal bordel, Ethereal !!!
ce genre de bug est un truc qui se torche en 20 secondes chrono !!

---------------
J'ai un string dans l'array (Paris Hilton)

Harkonnen

Modérateur
Un modo pour les bannir tous

pmusa >> tu prends mon plugin winamp dans ma signature, tu l'installes, et tu utilises Ethereal pour voir ce qu'il envoie. ça te fera un exemple d'utilisation

---------------
J'ai un string dans l'array (Paris Hilton)

micfont999

Simplement Moi

Harkonnen a écrit :

pmusa >> tu prends mon plugin winamp dans ma signature, tu l'installes, et tu utilises Ethereal pour voir ce qu'il envoie. ça te fera un exemple d'utilisation

Pas con l'histoire de ethereal, j'y aurais pas pensé, maintenant reste à savoir déchiffrer toutes ces petites données

esox_ch

Harkonnen a écrit :

Ethereal bordel, Ethereal !!!
ce genre de bug est un truc qui se torche en 20 secondes chrono !!

Genre je lui ai proposé il y a 5 posts [:adodonicoco]

---------------
Si la vérité est découverte par quelqu'un d'autre,elle perd toujours un peu d'attrait

Harkonnen

Modérateur
Un modo pour les bannir tous

esox_ch a écrit :

Genre je lui ai proposé il y a 5 posts [:adodonicoco]

parce que tu crois que je lis tout ?

Harkonnen

Modérateur
Un modo pour les bannir tous

micfont999 a écrit :

Pas con l'histoire de ethereal, j'y aurais pas pensé, maintenant reste à savoir déchiffrer toutes ces petites données

bah, y'a aucune difficulté :??:

Publicité

Page : 1 2

Page Suivante

Page Précédente

Haut de page

FORUM HardWare.fr

Programmation

PHP

réalisation d'un bot: automatisation d'une requête

Sujets relatifs
Problème de requete sql..nécessité d'une requete récursive??	[Résolu] simple requete en VBA :)
Pb de calcul avec une requête SQL	requete group by ?
[Access] Requête à partir d'une zone de texte (Résolu)	problème récupération de donnée après une requete
[ resolu - sql help ] requete sql not in	Requete de suppression en cascade
ACCESS requete SQL	Probleme dans requete sql
Plus de sujets relatifs à : réalisation d'un bot: automatisation d'une requête

Page générée en 0.171 secondes