# robots.txt — aipia.it (root WordPress) # Associazione Italiana Professionisti dell'Intelligenza Artificiale # 25/08/2026 (GN105, dec. 529): Bytespider fuori dagli invitati, gruppo # Disallow dedicato (blocco server mantenuto e ora dichiarato). # 15/08/2026 (GIRO SEO-AUDIT-15): (1) /esame-corso-base/ FUORI dal gruppo * # — la pagina ha già meta noindex e il Disallow impediva a Google di # leggerlo (conflitto H16 dell'audit docs/124); resta il Disallow nei # gruppi AI (intento: fuori dal training). (2) I 16 gruppi per-agent # erano solo "Allow: / + Disallow: /esame-corso-base/": per la semantica # REP un crawler con gruppo dedicato IGNORA il gruppo * — quindi i bot # AI erano gli UNICI ammessi in /wp-admin/, /login/ e nelle querystring # PMPro (M7). Ora un unico blocco condiviso con le stesse regole del *. User-agent: * Allow: / # Core WordPress Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php # Area riservata soci (login gestisce tutto il flusso account PMPro) Disallow: /login/ # Parametri di carrello/checkout PMPro (no pagine reali, solo querystring) Disallow: /*?add-to-cart= Disallow: /*?pmpro_* # Crawler AI esplicitamente benvenuti (AIPIA è ente no-profit di pubblica # utilità). Blocco UNICO: stesse regole del gruppo * + esame fuori dal # training. NB: il server deve smettere di rispondere 403 a # ClaudeBot/Amazonbot (WAF hosting — AZIONI-RAFA, ticket Netsons), o # questo invito resta lettera morta. Bytespider NON è più invitato: # gruppo Disallow in fondo, coerente col blocco server (dec. 529, GN105). User-agent: GPTBot User-agent: ChatGPT-User User-agent: OAI-SearchBot User-agent: ClaudeBot User-agent: Claude-Web User-agent: anthropic-ai User-agent: PerplexityBot User-agent: Perplexity-User User-agent: Google-Extended User-agent: GoogleOther User-agent: Applebot-Extended User-agent: CCBot User-agent: Amazonbot User-agent: Meta-ExternalAgent User-agent: DuckAssistBot Allow: / Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Disallow: /login/ Disallow: /esame-corso-base/ Disallow: /*?add-to-cart= Disallow: /*?pmpro_* # 30/08/2026 (GN185, dec. 676): riga Sitemap dedicata alle # PUBBLICAZIONI (sitemap-articoli, lastmod veri dalla sitemap nativa): # gli indicizzatori la leggono anche senza passare dall'indice. # Bytespider (ByteDance): NON invitato. Il server gli risponde 403 e il # robots dice la stessa cosa (coerenza robots↔WAF, dec. 529 — GN105). User-agent: Bytespider Disallow: / Sitemap: https://aipia.it/sitemap.xml Sitemap: https://aipia.it/sitemap-articoli.xml