# robots.txt - ortofiorito.it
# Obiettivo: impedire ai crawler di percorrere URL che ESEGUONO un'azione
# (aggiunta al carrello, alla wishlist, rimozione articoli) o che moltiplicano
# all'infinito lo spazio degli indirizzi (filtri, ordinamenti, viste).
# Le pagine di contenuto - prodotti, categorie, articoli - restano tutte scansionabili.

User-agent: *

# --- URL che eseguono un'azione: mai scansionare ---
Disallow: /*add-to-cart=
Disallow: /*add_to_cart=
Disallow: /*add-to-wishlist=
Disallow: /*remove_item=
Disallow: /*removed_item=
Disallow: /*undo_item=
Disallow: /*apply_coupon=
Disallow: /*remove_coupon=
Disallow: /*empty-cart=
Disallow: /*_wpnonce=
Disallow: /*wc-ajax=

# --- Pagine transazionali: nessun valore in ricerca ---
Disallow: /carrello/
Disallow: /cassa/
Disallow: /profilo/
Disallow: /lista-desideri/
Disallow: /en/cart/
Disallow: /en/checkout/
Disallow: /en/my-account/
Disallow: /en/wishlist/

# --- Filtri e ordinamenti: esplosione combinatoria di URL ---
Disallow: /*?orderby=
Disallow: /*&orderby=
Disallow: /*?view=
Disallow: /*&view=
Disallow: /*?per_page=
Disallow: /*&per_page=
Disallow: /*min_price=
Disallow: /*max_price=
Disallow: /*filter_
Disallow: /*query_type_
Disallow: /*rating_filter=
Disallow: /*?s=
Disallow: /*&s=

# --- Area amministrativa ---
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# --- oEmbed: indirizzi per incorporare le pagine in altri siti, nessun valore in ricerca ---
Disallow: /wp-json/oembed/

# ==========================================================================
# Crawler con passo lento. ATTENZIONE: un bot che trova un gruppo col proprio
# nome IGNORA il gruppo "*" (RFC 9309 / Google). Per questo ogni gruppo qui
# sotto ripete per intero le regole di sopra: se si cambia una riga in "*",
# va cambiata anche qui. Un gruppo con il solo Crawl-delay li lascerebbe liberi
# di seguire carrello, add-to-cart e filtri (corretto il 2026-09-29).
# ==========================================================================
User-agent: meta-externalagent
User-agent: meta-webindexer
User-agent: ClaudeBot
User-agent: GPTBot
User-agent: OAI-SearchBot
User-agent: PerplexityBot
Crawl-delay: 10


# --- URL che eseguono un'azione: mai scansionare ---
Disallow: /*add-to-cart=
Disallow: /*add_to_cart=
Disallow: /*add-to-wishlist=
Disallow: /*remove_item=
Disallow: /*removed_item=
Disallow: /*undo_item=
Disallow: /*apply_coupon=
Disallow: /*remove_coupon=
Disallow: /*empty-cart=
Disallow: /*_wpnonce=
Disallow: /*wc-ajax=

# --- Pagine transazionali: nessun valore in ricerca ---
Disallow: /carrello/
Disallow: /cassa/
Disallow: /profilo/
Disallow: /lista-desideri/
Disallow: /en/cart/
Disallow: /en/checkout/
Disallow: /en/my-account/
Disallow: /en/wishlist/

# --- Filtri e ordinamenti: esplosione combinatoria di URL ---
Disallow: /*?orderby=
Disallow: /*&orderby=
Disallow: /*?view=
Disallow: /*&view=
Disallow: /*?per_page=
Disallow: /*&per_page=
Disallow: /*min_price=
Disallow: /*max_price=
Disallow: /*filter_
Disallow: /*query_type_
Disallow: /*rating_filter=
Disallow: /*?s=
Disallow: /*&s=

# --- Area amministrativa ---
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# --- oEmbed: indirizzi per incorporare le pagine in altri siti, nessun valore in ricerca ---
Disallow: /wp-json/oembed/

User-agent: bingbot
User-agent: Applebot
Crawl-delay: 5


# --- URL che eseguono un'azione: mai scansionare ---
Disallow: /*add-to-cart=
Disallow: /*add_to_cart=
Disallow: /*add-to-wishlist=
Disallow: /*remove_item=
Disallow: /*removed_item=
Disallow: /*undo_item=
Disallow: /*apply_coupon=
Disallow: /*remove_coupon=
Disallow: /*empty-cart=
Disallow: /*_wpnonce=
Disallow: /*wc-ajax=

# --- Pagine transazionali: nessun valore in ricerca ---
Disallow: /carrello/
Disallow: /cassa/
Disallow: /profilo/
Disallow: /lista-desideri/
Disallow: /en/cart/
Disallow: /en/checkout/
Disallow: /en/my-account/
Disallow: /en/wishlist/

# --- Filtri e ordinamenti: esplosione combinatoria di URL ---
Disallow: /*?orderby=
Disallow: /*&orderby=
Disallow: /*?view=
Disallow: /*&view=
Disallow: /*?per_page=
Disallow: /*&per_page=
Disallow: /*min_price=
Disallow: /*max_price=
Disallow: /*filter_
Disallow: /*query_type_
Disallow: /*rating_filter=
Disallow: /*?s=
Disallow: /*&s=

# --- Area amministrativa ---
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# --- oEmbed: indirizzi per incorporare le pagine in altri siti, nessun valore in ricerca ---
Disallow: /wp-json/oembed/

User-agent: CCBot
Crawl-delay: 30


# --- URL che eseguono un'azione: mai scansionare ---
Disallow: /*add-to-cart=
Disallow: /*add_to_cart=
Disallow: /*add-to-wishlist=
Disallow: /*remove_item=
Disallow: /*removed_item=
Disallow: /*undo_item=
Disallow: /*apply_coupon=
Disallow: /*remove_coupon=
Disallow: /*empty-cart=
Disallow: /*_wpnonce=
Disallow: /*wc-ajax=

# --- Pagine transazionali: nessun valore in ricerca ---
Disallow: /carrello/
Disallow: /cassa/
Disallow: /profilo/
Disallow: /lista-desideri/
Disallow: /en/cart/
Disallow: /en/checkout/
Disallow: /en/my-account/
Disallow: /en/wishlist/

# --- Filtri e ordinamenti: esplosione combinatoria di URL ---
Disallow: /*?orderby=
Disallow: /*&orderby=
Disallow: /*?view=
Disallow: /*&view=
Disallow: /*?per_page=
Disallow: /*&per_page=
Disallow: /*min_price=
Disallow: /*max_price=
Disallow: /*filter_
Disallow: /*query_type_
Disallow: /*rating_filter=
Disallow: /*?s=
Disallow: /*&s=

# --- Area amministrativa ---
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# --- oEmbed: indirizzi per incorporare le pagine in altri siti, nessun valore in ricerca ---
Disallow: /wp-json/oembed/

Sitemap: https://ortofiorito.it/sitemap_index.xml

# ==========================================================================
# Crawler di estrazione: non portano visitatori e fanno piu traffico dei
# motori di ricerca. Qui glielo si chiede; in .htaccess glielo si impedisce.
# ==========================================================================
User-agent: Bytespider
Disallow: /

User-agent: DataForSeoBot
Disallow: /

User-agent: ImageBot
Disallow: /

User-agent: ImagesiftBot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: BLEXBot
Disallow: /

User-agent: PetalBot
Disallow: /