tag:blogger.com,1999:blog-6786955.post-1108286861928762252005-02-13T10:10:00.000+01:002005-03-12T18:53:03.150+01:00<span style="font-weight: bold;">Robot.txt fil</span><br />En optimering af en hjemmeside indbefatter brugen af en robot.txt fil<br />som de fleste webdesignere glemmer at implementere.<br /><br />En robot.txt fil er vigtig for din side, fordi du på den måde fortæller<br />en crawler, en robot (googlebot) hvad den kan og ikke kan tage med i sit index.<br />Du kan på den måde spærre af for mapper som admin eller stat.<br /><br /><span style="font-weight: bold;">Liste med variabler som kan være i en robot.txt fil og deres betydning.</span><br /><br /><span style="font-style: italic;">* User-agent: </span><br /> Her beskrives den enkelte robot og adgangs procedure<br /> eller tegnet "<span style="color: rgb(51, 51, 255);">*</span>" for alle robotter.<br /><br /><span style="font-style: italic;">* Disallow: </span><br /> Her beskrives hvilke filer og mapper der skal udelades under et crawl.<br /><br /><span style="font-style: italic;">* #</span><br /> Tegnet repræsenterer en kommentar.<br /><br /><span style="font-weight: bold;">Eksempler på robot.txt fil.</span><br /><br /><span style="font-style: italic;">User-agent: *</span><br /><span style="font-style: italic;">Disallow: </span><br />Betydnigen her fortæller at der er fri adgang til hele indholdet.<br /><br /><br /><span style="font-style: italic;">User-agent: *</span><br /><span style="font-style: italic;">Disallow: /cgi-bin/</span><br />Denne beder en robot om at udelade "<span style="color: rgb(51, 51, 255);">cgi-bin directory</span>" mappen.<br /><br /><br /><span style="font-style: italic;">User-agent: googlebot</span><br /><span style="font-style: italic;">Disallow:</span><br /><br /><span style="font-style: italic;">User-agent: *</span><br /><span style="font-style: italic;">Disallow: /admin.php</span><br /><span style="font-style: italic;">Disallow: /cgi-bin/</span><br /><span style="font-style: italic;">Disallow: /admin/</span><br /><span style="font-style: italic;">Disallow: /stats/<br /><br /></span>I dette eksempel er der fri adgang for googlebot til alle filer<br />og mapper medens det gælder for alle andre robotter om at<br />udelade filer som admin.php, cgi-bin, admin, stats mapperne.<br />&#149; <a href="http://home6.inet.tele.dk/anton/visibility.htm"><span style="font-weight: bold;">Søgemaskineoptimering &#187;</span></a>Kim Antonhttp://www.blogger.com/profile/00933926155941199771noreply@blogger.com