Bonsoir,
 
Je suis debutant en programation et je souhaiterais apprendre à pouvoir recuperer des informations de manière automatisée (via un script ? )
 
Exemple d'utilisation potentielle (il se peut que des api existent mais ce sont des exemples).
 

• Recuperer automatiquement les retards sur le site des aeroports
• Recuperer le noms des medecins sur une ville donnée via les pagesjaunes
• ...

Le soucis est que je ne sais pas du tout ce qu'il convient d'apprendre pour faire cela, étant donné qu'il doit y avoir des pratiques existantes.
 
Merci

Si les informations que tu cherches sont sur une page qui ne change pas d'url, il te suffit de faire un programme qui telecharge la page et qui parse le code html pour recuperer les infos la ou elles se trouvent.
Tu peux faire ca en n'importe quel langage du moment que tu trouves une lib de parsing html/xml.

A vrai dire il faut remplir une requête via un formulaire et ce sont les réponses à la requete qui m'interesse.

Non l'url n'est pas fixe (c'est du charabia et coller l'adresse sans la requete precedente, n'apporte rien)

Il faut que tu inclues les parametres POST ou GET dans la requete

 
 
Moi je le ferai en java avec SAX ou DOM, mais ya peut-etre plus simple. Quel est ton niveau actuel ? C'est pas forcement facile.

Je suis débutant. Je ne connais bien que le vb et le html.

Mais je ne demande qu'à apprendre.

En PHP ca semble etre assez simple :
http://simplehtmldom.sourceforge.net/
 
L'avantage du php c'est que ca s'apprend en 1 heure  

Il y aura la possibilité de remplir un formulaire et de simuler un clic sur le bouton valider, le tout automatiquement ?
 
Si oui je crois que c'est bon.

Le formulaire n'est que le moyen "humain" de donner des parametres à la page suivante.
Il suffit d'appeler la page suivante directement avec les parametres que l'on désire.

La lib Snoopy en php est bien aussi pour récupérer le contenu de pages web. Y'a aussi SimpleTest qui est une sorte de mini navigateur web textuel en php. A la base, c'est pour automatiser des tests (TU et TI) mais il propose pleins de fonctions pour analyser le code html issue d'une appli web

Le soucis c'est est que la adresse de la page ne correspond pas à une requête précise. C'est comme sur le site de la sncf, il n'y a pas de lien pour un train Lyon paris pour mardi prochain par exemple.

parce que ce sont des formulaires en POST. Avec snoopy ou simpleTest, suffit de simuler les actions que ferait un humain sur l'ihm pour arriver à la page souhaitée
 
Vérifiée que par hasard, y'aurait pas des API web ouvertes...

Je n apprends pas pour un site en particulier donc la question de l api ne se pose pas. Merci pour vos réponses en tout cas  
 

Je n apprends pas pour un site en particulier donc la question de l api ne se pose pas. Merci pour vos réponses en tout cas  
 

 
Ta lib, elle gère le dom mis à jour par du javascript/ajax?

Je ne l'ai jamais utilisée.
C'est un parseur php, la lib va chercher le fichier statique et le parse.
A aucun moment un javascript ne s'execute.

c'est ce que je me disais

Ca pose probleme ?

oui, l'appli que je voudrais "piloter" via php est tout en ajax Quelle saloperie, je te jure. J'ai juste une seule url, après, c'est tout du JS qui génère le contenu à la volée...

Si c'est de l'ajax, il te suffit de récupérer l'url des fichiers qui contiennent les données qui t'intéressent, et de les appeler directement... Où est le soucis ?

Je comprends pas ce que tu dis :
J'appelle l'url de l'appli. Là, y'a un formulaire généré par du javascript qui me demande mon login/mdp. Moi, je veux pourvoir les saisir via un script php. Ensuite, pour poster le formulaire, faut cliquer sur un <button> (pas un input type submit) qui poste le formulaire mais via une fonction javascript. Je veux donc pouvoir cliquer sur ce bouton via php.
 
Le but est de ne pas à devoir farfouiller dans le code source pour savoir ce que chaque fonction js fait
 
SimpleTest marche très bien pour cliquer sur des formulaires en html mais pas en JS

1- Télécharge firebug.
2- Charge ton formulaire et remplis-le.
3- Ouvre l'onglet Réseau de firebug.
4- Valide le formulaire.
5- Une nouvelle ligne va apparaitre dans firebug, elle correspond à la requete ajax faite pour soumettre le formulaire. Dedans tu as la page appelée, ainsi que la méthode utilisée, les parametres fournis.
 
Il te suffit alors d'appeler en php cette page avec les meme parametres, pour normalement obtenir le meme résultat !

je vais essayé, j'y avais pas pensé, merci

@ pascal le nain ?
 
C'est une autre méthode que tu décris ?

Non c'est juste le moyen d'obtenir les parametres necessaires dans le cas ou il y en ait besoin