A web crawler script that crawls the target website and lists its links

Devloped By Ashutosh Raval

                                            
                                            
  .--.--.       ___                         
 /  /    '.   ,--.'|_                       
|  :  /`. /   |  | :,'              __  ,-. 
;  |  |--`    :  : ' :            ,' ,'/ /| 
|  :  ;_    .;__,'  /    ,--.--.  '  | |' | 
 \  \    `. |  |   |    /       \ |  |   ,' 
  `----.   \:__,'| :   .--.  .-. |'  :  /   
  __ \  \  |  '  : |__  \__\/: . .|  | '    
 /  /`--'  /  |  | '.'| ," .--.; |;  : |    
'--'.     /   ;  :    ;/  /  ,.  ||  , ;    
  `--'---'    |  ,   /;  :   .'   \---'     
               ---`-' |  ,     .-./         
                       `--`---'             
                                            


                                                               
                                                               

sudo pip install -r requirements.txt

python -m pip install -r .\requirements.txt

python star.py --url http://example.com/etc

python star.py -u http://example.com/etc