Robots.txt Editor

Opis

Robots.txt je vizualni uređivač datoteka za izuzimanje robota i softver za analizu zapisa. Omogućuje korisniku brzo i jednostavno stvaranje datoteka robots.txt potrebnih za upućivanje paucima tražilice, koji su dijelovi web-mjesta, da se ne indeksiraju i ne smiju pretraživati ​​šira web-javnost, a zatim za prepoznavanje paukova koji ne pridržavajte se tih uputa. Program omogućuje korisniku način da se prijavi na svoj FTP ili poslužitelj lokalne mreže, a zatim odabere dokumente i direktorije koji se ne mogu pretraživati. Pomoću ovog programa moći ćete vizualno generirati industrijske standardne robots.txt datoteke; identificirati zlonamjerne i neželjene pauke i zabraniti im pristup vašoj stranici; usmjeriti pretraživače na odgovarajuće stranice za višejezične stranice; držite paukove podalje od osjetljivih i privatnih područja vaše web stranice; pratiti posjete pauka i više. Besplatna ažuriranja i nadogradnje programa neograničena vremenski; neograničen broj web stranica za rad.