package aspiweb;
 
import java.util.*;
import java.net.*;
import java.io.*;
 
 public class AspiDoc  
 {
 
    private  String pageHTML;
    private  String site;
    private     String racine;
    private     String pack;
    private     Object[] list;  
    private   static  Vector vecteur;    
     
     public  AspiDoc()
     {
 
   String pre = "http://java.sun.com/j2se/1.3/docs/api/";
   String post ="package-frame.html";
   System.out.print("     **********************\n" );
   System.out.print("    * Bienvenue sur aspidoc *\n" );
   System.out.print("     **********************\n\n" );
   System.out.print("Exemple de package pouvant etre aspiré : java/io , javax/swing \n\n" );
   System.out.print("Note:Vous devez être connecté a internet\n" );
   System.out.print("Entrez le package de l'API java de Sun a aspirer:" );
   
     
      try
       {
       BufferedReader entree = new BufferedReader(new InputStreamReader(System.in));
    list = null;  
     
       pack = entree.readLine() ;
    racine = pre + pack + "/";            
       site = racine + post;
       
    aspir(site,"index.htm",pack);
    list = getTableau();//contiens la liste des pages html contenue dans le package
    }catch(Exception e){System.out.print("probleme:" + e+"\n" );}
   
  }
   
  public Object[] getListOfPage()
  {
  return list;    
  }  
   
  public void get(Object list[])
  {  
     
    System.out.print("Il y a " + list.length + " Pages au format HTML a aspirer,\n" );
     
       for(int i=0;i<list.length;i++)
       {
                   pageHTML = list[i].toString();
         System.out.print(racine  + pageHTML + "\n" );
               aspir( racine + pageHTML ,pageHTML,pack);
       }
     
  }
   
  public void  aspir(String url,String page,String nom)
   {
   
   vecteur = new Vector();
   String balise;
   PrintWriter ecrivain = null;
   char caractereCourant;
   URL URLcourant=null;
   String lien;
   
   try
   {  
   URLcourant = new URL(url);
   ecrivain = getWriter (page,"docs/" + nom); //crée les sous dossiers et recupere une objet permettant d ecrire ds le ficher correspondant    
   DataInputStream donneesHTML= new DataInputStream(URLcourant.openStream());
   
    while (true)
    {
    caractereCourant = (char) donneesHTML.readByte();
    ecrivain.print(caractereCourant);
 
     if (caractereCourant=='<'
     {
        balise = getBalise(donneesHTML);
        ecrivain.print(balise);
         if((lien = analyse(balise))!="" &&lien.indexOf(":" )==-1 &&!lien.startsWith("../" ))
         setLien(lien);
     }
    }
   }catch (EOFException e) {} catch (Exception e) {System.err.println(":" + e);}
      ecrivain.close();
   }
   
       
       
       protected PrintWriter getWriter(String fichier, String dir)
       {
           PrintWriter printwriter = null;        
           String tmp = dir + "/" + fichier;
           File file = new File(tmp);
           System.out.print(tmp+"\n" );
           try
           {
               (new File(file.getParent())).mkdirs();
               file.createNewFile();
            printwriter = new PrintWriter(new BufferedWriter(new FileWriter(tmp)));    
           }
           catch(Exception exception)
           {
               System.out.print("exeption:" + exception + "\n" );
           }        
          return printwriter;
       }
     /**
     *Permet de recupérer une balise HTML lorsque l on passe en argument le DataInputStream
     *
     *
     **/
   protected String getBalise(DataInputStream flux)
   {
    String balise="";
    char a;
    try
    {
     while ((a =(char) flux.readByte() )   != '>'
     {
     balise   = balise +  a;
     }
    }
    catch (EOFException e) {}catch (Exception e) {}
    balise = balise + ">";
   return balise;
   }
 
     /**
     *Une fois la balise obtenu on l analyse pour en obtenir une lien vers une autre page HTML
     *S il existe on remplis un vecteur qui contiendra ainsi l ensemble des liens d une page
     *
     **/
   public String analyse(String balise)
   {
             String upper;
    String lien="";
    int index=0,index2,index3,index4;
       upper = balise.toUpperCase() ;//l'html n est pas sensible a la case nous en profitons pour simplifier le traitement
    if (upper.startsWith("A HREF" ))//si la chaine commence par ces chaines ,on peut esperer trouver  un lien...
    {
    index = upper.indexOf('=' + 2 ;//on cherche la position du "=" que l on incremente de 2 pour atteindre le debut du lien
    index2 = upper.indexOf('"',index+1);   // puis la position du  2em '"' on cherche donc apres le 1 er !
    lien = balise.substring(index,index2); // on recupere cette chaine qui corespond donc au lien
    }
   return lien;
   }
     /**
     *remplis le vecteur avec le lien passé en argument
     *
     *
     **/
      public static  void setLien(String lien)
      {
    vecteur.addElement(lien);
      }
     /**
     *permet d obtenir un tableau classique a partir du vecteur
     *Ceci a pour but de faciliter la programmation en effet les tableaux sont plus facile a mmanipuler que les vecteurs
     *
     **/
      public Object[] getTableau()
      {
       Object tab[] =vecteur.toArray();
       return tab;
      }
   
   
   
 public static void main(String args[])
 {
   
    Object[] list = null;
    AspiDoc aspidoc = new AspiDoc();
    list=aspidoc.getListOfPage();
    aspidoc.get(list);
 }
 
}