Search results for robots-txt
Filters
34 datasets for “robots-txt”
- data.gouv.fr
robots.txt et sitemap.xml sur 1 000 sites publics locaux français (octobre 2026)
Leroy LeroyUpdated 16 Oct 2026
Relevé reproductible, mesuré le 16 octobre 2026, de la présence d'un fichier `robots.txt` et d'un …
- JSON
- CSV
- data.gouv.fr
Les sites publics francais bloquent-ils les robots d'IA ? robots.txt de 3 581 domaines (aout 2026)
Leroy LeroyUpdated 27 Aug 2026
Mesure du fichier `robots.txt` de 3 581 noms de domaine declares par des administrations et organismes publics …
- HTML
- JSON
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans en Haute-Savoie (74) — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Île-de-France — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Guadeloupe — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Corse — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Occitanie — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Bretagne — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Normandie — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — La Réunion — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Grand Est — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Nouvelle-Aquitaine — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Auvergne-Rhône-Alpes — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Hauts-de-France — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Bourgogne-Franche-Comté — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Pays de la Loire — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Centre-Val de Loire — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
Fondamentaux SEO des commerces et artisans — Provence-Alpes-Côte d'Azur — 30 métiers
LinkumaUpdated 3 Nov 2026
… titres, meta descriptions, H1, canonical, directives noindex/nofollow Google observées, HTTPS, robots.txt, reconnaissance XML au chemin sitemap …
- ZIP
- TXT
- CSV
- data.gouv.fr
CMS et constructeurs de sites des commerces et artisans en Haute-Savoie (74) — 30 métiers
LinkumaUpdated 3 Nov 2026
… Toutes les réponses conservées proviennent d’audits via PapaProxy, dans le respect de robots.txt et des restrictions …
- ZIP
- TXT
- CSV
- data.gouv.fr
Données structurées locales des commerces et artisans — Guadeloupe
LinkumaUpdated 3 Nov 2026
… Jusqu’à trois pages publiques sont examinées par domaine, dans le respect des accès et de robots.txt …
- ZIP
- TXT
- CSV