Moteur html+javascript en ligne de commande

**grav** · 09/05/2012, 16h59

Bonjour,

Je voudrais récupérer le dom d'une page html en php au moyen d'une librairie.
Je précise que j'ai besoin que tout le code javascript lancés au démarrage de la page html soit exécuté! Ce code modifie le dom et j'ai besoin de récupérer ces infos.

En gros il me faudrait un navigateur en ligne de commande qui me retourne en texte le code de la page html modifiée par le javascript au démarrage

Vous avez des pistes?

Merci

**m4riachi** · 09/05/2012, 20h14

Essai avec

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
 
function get($url,$post_fields = null)
	{
		$ch = curl_init($url);
 
		$ua = 'User-Agent: Mozilla/4.0 (compatible; MSIE 5.01; Widows NT)';
		curl_setopt($ch, CURLOPT_URL, $url);
		curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
		curl_setopt($ch, CURLOPT_USERAGENT, $ua);
 
		curl_setopt ($ch, CURLOPT_HEADER, 1);
		curl_setopt ($ch, CURLOPT_SSL_VERIFYPEER, 0);
		curl_setopt ($ch, CURLOPT_SSL_VERIFYHOST, 0);
 
		if($post_fields != null)
		{
			curl_setopt($ch, CURLOPT_POST, 1);
			curl_setopt($ch, CURLOPT_POSTFIELDS, $post_fields);
		}
		$result = curl_exec($ch);
		$dom = new DOMDocument();
		@$dom->loadHTML($result);
		curl_close($ch);
		sleep(1);
		return $dom;
	}

Une fonction que j'ai déjà utilisé qui récupère l'HTML de la page appelé.
pour en savoir sur les paramètres du cURL regarde la documentation officiel.

**grav** · 10/05/2012, 15h14

Merci pour ta réponse. Malheureusement j'ai fait le test et curl ne m’exécute pas le code javascript.
exemple d'un page html que je veux parser avec curl:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
<html>
	<script>
	function init() {
		var p=document.createElement('p');
		p.id='b';
		p.innerHTML='bbbbbb';
		document.body.appendChild(p);
	}
	</script>
<body onload="init()">
	<div id="a">aaaaaa</div>
</body>
</html>

Quand je lis cette page avec curl, l'élément p avec l'id='b' n'est pas créé et non disponible.

Il me faudrait un moteur qui interprète le javascript de la page avant de me donner le résultat

**stealth35** · 10/05/2012, 15h24

En PHP seul c'est pas possible

**grav** · 10/05/2012, 15h42

J'ai trouvé des moteurs javascript pour php:

http://php.net/manual/en/book.v8js.php
http://pecl.php.net/package/spidermonkey
http://j4p5.sourceforge.net/

J'utilise déjà le dernier, pour d'autres projets, car il a l'avantage d'être en pur php.
En revanche ces moteurs ne font pas également interpréteur html. Je ne peux leur donnée une page HTML avec du javascript, seulement du javascript pur.

Il me faudrait vraiment un browser en ligne de commande, mais je désespère un peu de le trouver. Je crois que je vais contourner le problème mais cela va être plus difficile.

Si quelqu'un peut m'offrir un dernier espoir...

**stealth35** · 10/05/2012, 15h44

c'est juste des moteurs javascript donc ça ne marchera pas non plus

tu dois pourvoir faire ça avec PhantomJS

**grav** · 11/05/2012, 09h46

Très prometteur!!!

J'essaie tout de suite et je vous tiens au courant!

Un grand merci pour ce lien!

Moteur html+javascript en ligne de commande

Bibliothèques et frameworks PHP

Discussions similaires

Partager

Partager