Robots.txt Editor

Beskrivelse

Robots.txt er en visuel editor til Robot Exclusion Files og en loganalysatorsoftware. Det giver en bruger mulighed for hurtigt og nemt at oprette de robots.txt-filer, der kræves for at instruere søgemaskinespiders, som er dele af et websted, der ikke skal indekseres og gøres søgbare af den brede internetpublikation, og derefter identificere edderkopper, som ikke holde sig til disse instruktioner. Programmet giver brugeren mulighed for at logge på sin FTP eller lokale netværksserver og derefter vælge de dokumenter og mapper, som ikke skal gøres søgbare. Ved hjælp af dette program vil du være i stand til visuelt at generere industristandard robots.txt-filer; identificere ondsindede og uønskede edderkopper og forbyde dem fra dit websted; direkte søgemaskinecrawlere til de relevante sider for flersprogede websteder; holde edderkopper væk fra følsomme og private områder på dit websted; spore edderkoppebesøg og mere. Gratis programopdateringer og opgraderinger ubegrænset i tid; ubegrænset antal websteder at arbejde med.