Forum |  HardWare.fr | News | Articles | PC | Prix | S'identifier | S'inscrire | Aide Recherche
1258 connectés 

  FORUM HardWare.fr
  Seti et projets distribués

  Depspid - Construction d'une cartographie du web

 


 Mot :   Pseudo :  
 
Bas de page
Auteur Sujet :

Depspid - Construction d'une cartographie du web

n°1733924
popolito
http://www.boinc-af.org/
Posté le 30-04-2007 à 20:06:38  profilanswer
 

Url du projet : http://www.depspid.net/
Description du projet
 
Le projet a 2 buts principaux :  

  • Construire une base de données sur les dépendances entre les sites internet individuels et les sites internet groupés.  
  • Rassembler des données statistiques sur la structure d'internet.


La création de compte est possible depuis aujourd'hui.
Le projet est assez spécial car il utilise pas mal la bande passante (du moins, il y a pas mal de données à télécharger) mais n'utilise que peu le processeur (les autres projets continueront à fonctionner normalement), de plus, le nombre de points est surtout donné pour la quantité télécharger et non le temps de calculs.
 
Par exemple :
473 secondes pour un pentium M 1400MHz donne 11.05 points.


---------------
http://www.boinc-af.org/
mood
Publicité
Posté le 30-04-2007 à 20:06:38  profilanswer
 

n°1733933
Ttienne
C'est pas pour me vanter, mais
Posté le 30-04-2007 à 21:13:32  profilanswer
 

intéressant pour des machines modestes [:huit]

n°1733950
Astro 111
- Red Orchestra 2 - BF 2 PR -
Posté le 30-04-2007 à 22:05:25  profilanswer
 

Depspid : les inscriptions sont à nouveau ouvertes. Le but est de construire une "cartographie" de "la toile".
Url du projet : http://www.depspid.net
Description du projet : http://www.boinc-af.org/content/view/415/215/
Le projet est assez spécial, il utilise pas mal la bande passante, calcule peu, donne des points surtout pour la quantité téléchargée et calcule en même temps que les autres projets (en ne les gênants pas puisque les autres projets tournent à 100%).


Message édité par Astro 111 le 30-04-2007 à 22:05:48

---------------
Nouveau site photo -
n°1734045
popolito
http://www.boinc-af.org/
Posté le 01-05-2007 à 12:18:33  profilanswer
 

Au passage, vous pouvez augmenter le nombre de wus simultanées comme ça, ça utilise vraiment toute votre bande passante (mais là, ça utilisera vraiment tout, qu'avec 2 wus simultanées, ça télécharge un peu mais ça ne ralentit pas du tout internet).

n°1734206
Raistlin M​ajere
i bouh at you !
Posté le 01-05-2007 à 18:51:06  profilanswer
 
n°1741544
popolito
http://www.boinc-af.org/
Posté le 28-05-2007 à 09:57:12  profilanswer
 

Une nouvelle application depspid vient de sortir. Elle corrige des bugs.
Allez-y, il y a pas mal de travail en ce moment :)

n°1786501
popolito
http://www.boinc-af.org/
Posté le 18-01-2008 à 07:22:19  profilanswer
 

Le projet est de retour après 2-3 mois d'absence avec des unités à la pelle, une application qui ne bloque plus l'ordinateur et une application qui utilise moins de temps CPU (ça crédite toujours en fonction de la quantité de données téléchargées, donc ça crédite encore plus pour moins de temps CPU).
Vous pouvez toujours acceptez que plusieurs unités tournent sur l'ordinateur mais attention aux ralentissements d'internet si vous en mettez trop (avec une connexion faiblarde) et attention à l'utilisation de la mémoire vive.

n°1787023
e-TE
Posté le 21-01-2008 à 02:04:45  profilanswer
 

petite question, vu que ce projet ne necessite que peu de temps cpu, pendant qu'il se gave avec la bande passante, le cpu peut quand meme crunsher d'autre unitée d'un autre projet sans que ca interfere?


---------------
Flickr!| [ACH] bloc alim pour catalyst 3524-XL-EN ( model psm66-201 )|Live 9 - Webradio Pop| N'oubliez plus la diffusion de vos series!|url shortener
n°1787029
popolito
http://www.boinc-af.org/
Posté le 21-01-2008 à 07:08:12  profilanswer
 

Oui. Depspid ne prend qu'1% par ci par là. Donc une unité de travail peut durer 1 semaine de temps en temps.

n°1787032
CorranHorn
0.300 GFlops/s
Posté le 21-01-2008 à 07:32:29  profilanswer
 

Il n'y a même pas une appli pour linux ou Mac ...

n°1787130
popolito
http://www.boinc-af.org/
Posté le 21-01-2008 à 17:40:48  profilanswer
 

Ce n'est que pour windows 32bits oui.
Il n'y aura pas d'appli Mac mais il y en aura une Linux normalement.

n°1787342
verdy_p
Posté le 23-01-2008 à 00:50:50  profilanswer
 

Au vu de la liste des sites web que ce programme va visiter massivement et sans discernement, je considère maintenant DepSpid comme particulièrement dangereux, d'autant que le projet n'explique pas du tout lui-même ce qu'il fait des données ou la politique de sécurité qu'il a mis en place pour éviter d'aider les spammeurs.
 
DepSpid enregistre les cookies des sites qu'il visite et les transmet à tous les fournisseurs de contenus tiers (serveurs de pub). DepSpid génère donc des revenus pour les "webmestres" qui mettent en place des milliers de sites au seules fin de générer des revenus par la seule visite de leurs pages, et des liens "sponsors".
 
Regardez les unités de travail dans "BOINC\www.depspid.net\depspid-<numéro>.xml". le résultat est éloquent: on n'y trouve que des sites de "money-makers".
 
J'arrête toute collaboration. Ce projet est dangereux car sans aucune politique sur la sécurité (pourquoi d'ailleurs a-t-il besoin de stocker et renvoyer les cookies pour les sites qu'ils indexe? Aucun intéret pour le projet dans la façon dont il est décrit, car cela ne sert pas du tout à établir une cartographie du web).  
 
Je ne vois pas l'intéret de faire tourner ce programme (gagner des points de classements? Inutile si cela sert juste à vous motiver pour aider les spammeurs!)

n°1787344
e-TE
Posté le 23-01-2008 à 00:55:44  profilanswer
 

:gratgrat: bien fait de pas avoir le temps de m'y inscrire alors :o


---------------
Flickr!| [ACH] bloc alim pour catalyst 3524-XL-EN ( model psm66-201 )|Live 9 - Webradio Pop| N'oubliez plus la diffusion de vos series!|url shortener
n°1787348
Le Profana​teur
Borderline attitude
Posté le 23-01-2008 à 01:23:14  profilanswer
 

http://www.bjoernhenke.de/forum/viewtopic.php?t=595
Indeed.
Edit c'est le fofo du site.


Message édité par Le Profanateur le 23-01-2008 à 01:23:34

---------------
Abordez la pente du bon côté ! \o/ Let the light surround you \o/ Jump ! Baby jump !
n°1787358
power600
Schtroumpférateur grognon
Posté le 23-01-2008 à 05:09:27  profilanswer
 

En effet (:D)...
 
Moi j'ai pas compris le but de ce projet  :o

n°1787464
popolito
http://www.boinc-af.org/
Posté le 23-01-2008 à 19:39:46  profilanswer
 

Réponse de l'administrateur du projet :
http://www.bjoernhenke.de/forum/vi [...] =2394#2394

n°1787466
Jean920
Posté le 23-01-2008 à 20:43:41  profilanswer
 

verdy_p a écrit :

Au vu de la liste des sites web que ce programme va visiter massivement et sans discernement, je considère maintenant DepSpid comme particulièrement dangereux, d'autant que le projet n'explique pas du tout lui-même ce qu'il fait des données ou la politique de sécurité qu'il a mis en place pour éviter d'aider les spammeurs.
 
DepSpid enregistre les cookies des sites qu'il visite et les transmet à tous les fournisseurs de contenus tiers (serveurs de pub). DepSpid génère donc des revenus pour les "webmestres" qui mettent en place des milliers de sites au seules fin de générer des revenus par la seule visite de leurs pages, et des liens "sponsors".
 
Regardez les unités de travail dans "BOINC\www.depspid.net\depspid-<numéro>.xml". le résultat est éloquent: on n'y trouve que des sites de "money-makers".
 
J'arrête toute collaboration. Ce projet est dangereux car sans aucune politique sur la sécurité (pourquoi d'ailleurs a-t-il besoin de stocker et renvoyer les cookies pour les sites qu'ils indexe? Aucun intéret pour le projet dans la façon dont il est décrit, car cela ne sert pas du tout à établir une cartographie du web).  
 
Je ne vois pas l'intéret de faire tourner ce programme (gagner des points de classements? Inutile si cela sert juste à vous motiver pour aider les spammeurs!)


 
Je crois que tu te trompe
 
Depspid visite tous les sites aléatoirement et sans distinction, il suit les liens qu'il y a entre chaque site internet. Et le but est justement d'étudier les liens entre tous ces sites
Les sites visités sont à l'image du web, c'est à dire qu'il y a beaucoup de merde. Mais c'est comme ça, si tu veux faire une cartographie complète le robot doit tout visiter au moins une fois. Ensuite seulement tu peux commencer à écarter la merde
 
Dans mes fichiers .xml par exemple j'ai des sites du type :
cheval-provence.com
primareptilia.com/
animabilis.de
etc...
 
On remarque clairement que les sites visités sont du même domaine puisqu'ils correspondent aux liens entre chaque site, donc tu peux très bien tomber sur une suite de sites avec que de la merde, des sites de warez ou de X qui pointent les uns avec les autres par exemple
 
Dans les sites que tu as posté sur Depsid, il y a aussi beaucoup de sites avec du vrai contenu
 
south-park.xf.cz
theedge21.blogspot.com/
...
 
Pour les pubs ce genre de robots ne marchent pas, les agence de publicité internet ne sont pas à ce point naïfs pour payer du faux traffic. Pareil pour les classements sur internet.
 
Et si tu compare le robot de Depspid par rapport à Googlebot ou Yahoo Slurp, c'est vraiment comparer un microbe et un éléphant.
Regarde par exemple ici, dans la rubrique Visiteurs Robots/Spiders
http://www.boinc-af.org/cgi-bin/awstats.pl
 
Pour le mois de janvier sur boinc-af, 3.89 Go de traffic uniquement pour Googlebot


Message édité par Jean920 le 23-01-2008 à 21:02:55
mood
Publicité
Posté le   profilanswer
 


Aller à :
Ajouter une réponse
  FORUM HardWare.fr
  Seti et projets distribués

  Depspid - Construction d'une cartographie du web

 

Sujets relatifs
Ziliz.com : Construction d'une ontologie à l'echelle du web 
Plus de sujets relatifs à : Depspid - Construction d'une cartographie du web


Hit-Parade
Copyright © 1997-2012 Hardware.fr SARL / Groupe LDLC / LesNumeriques.com / Version anglaise du site: BeHardware