<%@ Page Language="VB" ResponseEncoding="iso-8859-1" Inherits="AACPage" %> <%@ import Namespace="System.Data" %> <%@ import Namespace="System.Data.Oledb" %> <%@ import Namespace="System.Data.ODBC" %> <%@ Register TagPrefix="aac" TagName="header" Src="~/header.ascx" %> <%@ Register TagPrefix="aac" TagName="footer" Src="~/footer.ascx" %> <%@ Register TagPrefix="aac" TagName="telaioHeader" Src="~/service/include/telaio_header.ascx" %> <%@ Register TagPrefix="aac" TagName="telaioFooter" Src="~/service/include/telaio_footer.ascx" %> <%@ Register TagPrefix="aac" TagName="autoreFile" Src="~/service/include/autore_file.ascx" %> <%@ Register TagPrefix="aac" TagName="aggiornamenti" Src="~/service/include/aggiornamenti.ascx" %> <%@ Register TagPrefix="aac" TagName="ultimiPost" Src="~/forum/inc_ultimi_post.ascx" %> <%@ Register TagPrefix="aac" TagName="ultimiPost3" Src="~/forum/inc_ultimi_post_nuovo.ascx" %> <%@ Register TagPrefix="aac" TagName="aspect" Src="~/service/include/aspect.ascx" %> <%@ Register TagPrefix="aac" TagName="adsenseGenerator" Src="~/service/include/adsense_generator.ascx" %> <% 'Il controllo per il paging correntemente Ŕ registrato qua e lÓ, ma andrebbe 'eliminato da tutte le parti e messo qui '<'%@ Register TagPrefix="aac" TagName="paging" Src="~/service/include/paging.ascx" %'> %> ArcadiA Club - Il file robots.txt: spiegazione rapida <% sez_id = 41 immm = "webmaster" categoria = 1 #CONST aspect_asp = 0 forum_id_asp = "16" sc_asp = 1 %> <%-- --%>
 
- Il file Robots.txt -
 
TUTORIAL
 Cos'Ŕ e a cosa serve il file robots.txt

Vietare l'accesso

  <% 'ADV_ORGANIZER 1.0 | formato, categoria, base, altezza, unico, disposizione, voto, dove, numero,tipo,refresh,output response.write(organize_adv(0,categoria,120,600,,,7,,1,0,1,)) %>

DEFINIZIONE
Il file "Robots.txt" Ŕ un normale file di testo (da posizionare nella root, la cartella principale del proprio spazio web) che contiene delle restrizioni di utenza al proprio sito; esso pu˛ esporre un elenco di browser o di spider (User-agent, robot, o altro) che non devono avere accesso ad una determinata parte o a tutto il sito in questione (Disallow). Esempio:

User-agent: NomeUserAgent Disallow: /

Il primo campo (User-agent) serve a definire quale robot (es. Internet Explorer, lo spider di Google, ecc.) dovrÓ essere escluso, il secondo (Disallow) invece descrive da quale sezione del sito escluderlo. Ecco un esempio che fornisce una panoramica generale del funzionamento del file: robots.txt.

I VANTAGGI
In teoria i file robots.txt avrebbero l'enorme utilitÓ di "nascondere" agli User-agent indesiderati il proprio sito o parte di esso.

GLI SVANTAGGI
Le problematiche legate a i file robots.txt sorgono quando l'User-agent (il robot) ignora le limitazioni imposte dal file (attenzione per˛ a non confondere un robot che ignora le disposizioni del robots.txt da un robot che non comprende ci˛ che sta scritto nello stesso).

COME TESTARLI
Esistono vari siti che offrono tool che permettono di testare la validitÓ del file robots.txt e i nomi dei vari User-agent; una buona lista pu˛ essere quella fornita qui e nella sezione LinkZ di AAC.

 
<< INDIETRO