De inhoud van de website staat onder andere verspreid over de pagina's The Robots.txt, Tags en Frequently Asked Questions. Hieronder staan de belangrijkste 10 subpagina's van Robotstxt.org vermeld:
# | Beschrijving | URL op de website die vaak door externe bronnen wordt aangehaald. |
---|---|---|
1. | The robots.txt | /robotstxt.html |
2. | tags | /meta.html |
3. | Frequently Asked Questions | /faq.html |
4. | Mailing list | /mailinglist.html |
5. | Other Sites | /other.html |
6. | About robotstxt.org | /about.html |
7. | robots.txt checker | /checker.html |
8. | Robots Database | /db.html |
9. | IP lookup | /iplookup.html |
10. | skip to content | /#content |
Een Apache-webserver host de websites van Robotstxt.org. De website vermeldt in de metagegevens niets over het registreren van de inhoud door zoekmachines. Daarom wordt de inhoud door zoekmachines geregistreerd. De website bevat reclame van Google Adsense.
IP-adres:: | 93.93.131.3 |
Aantal websites: | 3 - andere websites met dit IP-adres |
Taalverdeling: | 67% van de websites is Engels |
Webserversoftware: | Apache, Versie 2.4.38 |
Besturingssysteem: | Debian (Linux) |
Laadtijd: | 0.08 seconden (sneller dan 99 % van alle websites) |
Bestandsgrootte: | 4.26 KB (189 herkende woorden in de tekst) |
De website bevat geen aanstootgevende inhoud en kan door minderjarigen en op het werk worden bezocht.
Criterium | Classificatie | |
---|---|---|
Google Safebrowsing |
Veilig | |
Geschikt voor jongeren |
||
Safe for work |
||
Webwiki-beoordeling |
Geen beoordelingen | |
Serverlocatie |
Niet gevonden | |
Betrouwbaar 79% |