Bekijk de onderstaande video om te zien hoe je onze site als een web app op je startscherm installeert.
Opmerking: Deze functie is mogelijk niet beschikbaar in sommige browsers.
Het bestand moet in de rootdirectory staan(zie Wikipedia). Dus http://www.huppeldepup.nl/robots.txt
When a robot looks for the "/robots.txt" file for URL, it strips the path component from the URL (everything from the first single slash), and puts "/robots.txt" in its place.
For example, for "http://www.example.com/shop/index.html, it will remove the "/shop/index.html", and replace it with "/robots.txt", and will end up with "http://www.example.com/robots.txt".
Jawel. Robots.txt behoort in de root van je domein te staan. Zie http://www.robotstxt.org/robotstxt.html:
User-agent: *
Allow: /
ofwel, voor alle user-agents geld: niemand mag er niet in (dus: iedereen mag erinUser-agent: *
Disallow:
Ikzelf heb dezefwel, voor alle user-agents geld: niemand mag er niet in (dus: iedereen mag erin
)
dus ik zou voor die gaanTo allow all robots complete access
Code:User-agent: * Disallow:
Die van Vegras met disallow is de goede.
allow wordt (nog) niet door alle spiders ondersteund, schijnt het. Het is bedoeld om als je bijvoorbeeld /images/ verbiedt, /images/leuke-plaatjes/ toch toe te staan.
Afbeeldingen worden door Google altijd in Afbeeldingen opgenomen, nooit in de gewone index, want die is alleen voor tekst en zo.
Dus als je wilt dat ze bij de afbeeldingen worden opgenomen, kun je ze gewoon laten indexeren. Als je op die afbeeldingen zoekt worden ze gevonden aan de hand van de alt-tekst (die heb je vast netjes overal gebruikt) en/of de tekst in de buurt van de afbeelding. Hoe dat helemaal precies werkt is een van de vele geheimen van Google.
Die alt-tekst is onmisbaar voor bijvoorbeeld blinden. In plaats van de afbeelding te zien krijgen die dan de alt-tekst te horen.
'n Zoekmachine is redelijk vergelijkbaar met 'n blinde: de spider kan ook alleen maar tekst lezen. Dus in dit geval gaat sociaal zijn prima samen met eigenbelang.
Wat ik nog vergat: de bestandsnaam kan ook nog van belang zijn voor de afbeelding.
Als je 'n afbeelding van 'n aap hebt met als alt 'Aap in mijn achtertuin' en als bestandsnaam aap.jpg, is de kans redelijk groot dat die wordt gevonden als je op aap zoekt. Zeker als daaromheen ook nog 'n verhaal staat hoe die aap in je achtertuin is gekomen.
We gebruiken essentiële cookies om deze site te laten werken, en optionele cookies om de ervaring te verbeteren.