AEO tecnico perché i motori di risposta possano raggiungere, leggere e citare il Suo sito

Che cosa copre l'AEO tecnico che il lavoro sui contenuti non copre?

Copre tutto ciò che sta tra il crawler di un motore di risposta e i Suoi testi: autorizzazioni, distribuzione, markup e scoperta. La ristrutturazione dei contenuti decide che cosa dice una pagina; questo livello decide se una macchina la riceve davvero.

Lo trattiamo come un filone di lavoro separato perché i guasti sono silenziosi. Un sito può posizionarsi bene nella ricerca classica mentre una sola riga disallow, una regola anti-bot sulla CDN o un guscio di pre-rendering vuoto tengono fuori uno o più motori di risposta. Il nostro audit AEO segnala questi problemi; questo servizio li corregge e li mantiene corretti dopo ogni redesign, migrazione o modifica di sicurezza.

• Regole robots.txt per ogni token di ricerca, di recupero su richiesta dell'utente e di addestramento.
• Regole della CDN e del web application firewall che stanno davanti a robots.txt.
• HTML renderizzato lato server per la risposta principale di ogni pagina importante.
• Schema Organization, Product, Article e FAQ coerente con ciò che vedono i visitatori.
• Sitemap XML, date di ultimo aggiornamento e ping IndexNow per i contenuti nuovi.

Chi ha bisogno dell'AEO tecnico e in che cosa si differenzia dagli altri nostri servizi?

L'AEO tecnico serve a qualsiasi sito il cui accesso ai motori di risposta sia incerto: siti dietro Cloudflare o un altro firewall, siti su framework JavaScript, siti migrati di recente e siti in cui il team di sicurezza ha aggiunto regole sui bot senza avvisare il marketing. Se non sa dire quali crawler IA hanno visitato la Sua pagina dei prezzi la settimana scorsa, il servizio fa per Lei.

Alcuni settori incontrano questi problemi più spesso. I brand ecommerce gestiscono cataloghi ampi con URL a faccette e feed di prodotto, dove lo spreco di crawl e i dati obsoleti nascondono le pagine che contano, e ChatGPT shopping aggiunge un canale feed separato per i partner approvati. I siti immobiliari caricano spesso gli annunci tramite script, mentre hotel e brand di viaggi fanno passare frequentemente le pagine attraverso motori di prenotazione che i crawler gestiscono male.

Questo servizio rilascia correzioni; non diagnostica l'intera presenza nell'IA né scrive contenuti. L'audit AEO registra ciò che dicono i motori e trova i problemi a ogni livello, la scrittura di contenuti AEO produce le pagine e il monitoraggio della visibilità nell'IA riporta le citazioni nel tempo. L'AEO tecnico è il livello che garantisce che gli altri tre non vadano sprecati.

Quali crawler IA conviene consentire in robots.txt?

Consenta i crawler che portano le pagine nelle risposte, poi prenda una decisione aziendale separata sui crawler di addestramento. Confondere le due cose è l'errore più comune che vediamo nell'accesso dei crawler IA.

La documentazione dei crawler di OpenAI afferma che OAI-SearchBot fa emergere i siti nella ricerca di ChatGPT, rispetta robots.txt e recepisce le modifiche in circa 24 ore, mentre i siti che si escludono non compaiono nelle risposte di ricerca. GPTBot raccoglie dati di addestramento e bloccarlo esclude solo dall'addestramento. La guida ai bot di Perplexity descrive PerplexityBot come un crawler di ricerca non usato per l'addestramento. Il centro assistenza di Anthropic distingue Claude-SearchBot, usato per la qualità della ricerca, da ClaudeBot, usato per l'addestramento. La documentazione dei crawler di Google spiega che AI Overviews e AI Mode usano Googlebot e che Google-Extended è un token di controllo, non un crawler, che riguarda l'addestramento di Gemini e il grounding delle Gemini Apps senza influire sulla Ricerca Google. Bingbot esegue il crawling per Copilot; non esiste un crawler Copilot separato.

Cloudflare sta bloccando i crawler IA sul Suo sito?

È possibile, anche se il Suo robots.txt sembra aperto. Il 1° luglio 2025 Cloudflare ha cambiato l'impostazione predefinita per bloccare i crawler IA a meno che non paghino, e il suo report sui bot di giugno 2026 afferma che i crawler di addestramento IA sono bloccati per impostazione predefinita su tutti i nuovi domini, osservando che l'addestramento rappresenta il 52% delle richieste dei crawler.

Il robots.txt gestito da Cloudflare può aggiungere una riga di content signal come search=yes, ai-train=no e bloccare con disallow GPTBot, ClaudeBot, Google-Extended, Applebot-Extended e CCBot. Per molti brand è una configurazione sensata, ma verifichiamo che i crawler di ricerca restino consentiti anche nelle regole di Cloudflare. Il pay per crawl può rispondere a un crawler con HTTP 402 Payment Required: è bene saperlo se i Suoi log mostrano risposte 402 a bot che intendeva accogliere. Segnaliamo inoltre che nell'agosto 2025 Cloudflare ha riferito che Perplexity usava crawler non dichiarati e lo ha rimosso dall'elenco dei bot verificati, quindi le regole che ammettono solo i bot verificati richiedono una decisione consapevole su PerplexityBot.

Il markup schema per l'IA aiuta a ottenere citazioni?

Non direttamente, e non lo venderemo come leva per le citazioni. La guida di Google all'ottimizzazione per l'IA afferma che i dati strutturati non sono necessari per la ricerca con IA generativa e che non esiste un markup schema.org speciale da aggiungere, pur raccomandando di continuare a usarli per la SEO in generale.

Implementiamo comunque lo schema con cura perché espone i fatti sulla Sua entità in un unico punto coerente. Il markup Organization con link sameAs ai Suoi profili LinkedIn, Wikidata, G2 o Google Business Profile aiuta a mantenere coerenti nome, categoria e sedi ovunque Lei compaia. Le indicazioni di Google per avere successo nella ricerca IA aggiungono che i dati strutturati devono corrispondere al contenuto visibile, perciò rimuoviamo il markup FAQ o recensioni che descrive testo che il visitatore non può vedere.

Come vanno costruite le pagine perché i motori di risposta possano leggerle?

Metta la risposta nell'HTML inviato dal server, in alto, sotto un titolo che corrisponda alla domanda. Non diamo per scontato che ogni crawler esegua JavaScript, quindi testiamo ogni template chiave con gli script disattivati e correggiamo tutto ciò che scompare.

Oltre al rendering, controlliamo tag canonical, codici di stato, catene di redirect e percorsi duplicati, perché un crawler che spreca richieste su parametri o soft 404 potrebbe non arrivare mai alla pagina che Lei vuole veder citata. I canonical contano più di quanto sembri: lo studio di Gradial sui viaggi di luglio 2026 ha trovato un brand che non veniva mai citato a causa di un URL canonical non corrispondente. Ogni pagina importante riceve una data di ultimo aggiornamento visibile, una struttura dei titoli pulita e tabelle in vero markup di tabella anziché immagini. Google afferma che non servono file speciali, markup o copie in Markdown e che non è necessario spezzare i contenuti in frammenti minuscoli, quindi manteniamo le pagine intere e leggibili.

Quali errori tecnici tengono i siti fuori dalle risposte dell'IA?

L'errore più dannoso è un blocco generico che colpisce anche i crawler di ricerca. Un disallow con caratteri jolly pensato contro gli scraper, una modalità anti-bot della CDN o una pagina di verifica del firewall possono escludere OAI-SearchBot o PerplexityBot mentre Googlebot continua a passare, così i posizionamenti classici sembrano a posto e nessuno se ne accorge.

Seguono le lacune di rendering: dettagli di prodotto, prezzi o risposte FAQ iniettati da JavaScript dopo il caricamento, per cui una richiesta senza motore di browser vede un template vuoto. Poi il markup che contraddice la pagina, come uno schema FAQ per domande che nessun visitatore può leggere o uno schema Organization con un vecchio indirizzo. Infine le lacune di scoperta: sitemap senza date lastmod, nuove pagine mai inviate e Bing Webmaster Tools mai verificato, il che conta perché Bingbot è il crawler alla base di Copilot.

I siti internazionali aggiungono modalità di errore proprie. Un sito che serve Emirati Arabi Uniti e India da un unico dominio può reindirizzare geograficamente i crawler alla versione sbagliata, oppure etichettare le pagine con hreflang che puntano a redirect. Testiamo gli URL di ogni mercato come li vedrebbe un crawler, così ogni versione è raggiungibile al proprio indirizzo.

Come si conferma che le correzioni hanno davvero funzionato?

Leggiamo i log del server. Una modifica a robots.txt dimostra un'intenzione; una risposta 200 a OAI-SearchBot, PerplexityBot o Claude-SearchBot sugli URL giusti dimostra l'accesso.

Confrontiamo gli user agent con gli intervalli IP pubblicati, dove i fornitori li mettono a disposizione come fa Perplexity, così i bot falsificati non distorcono il quadro. Poi inviamo le sitemap aggiornate, facciamo il ping IndexNow per Bing e seguiamo il report sul rendimento dell'IA generativa di Search Console e AI Performance di Bing Webmaster Tools per le pagine citate. Il reporting continuativo delle citazioni fa capo al nostro servizio di monitoraggio della visibilità nell'IA.

I log mostrano anche la scala del crawling rispetto al valore restituito. I dati di Cloudflare di luglio 2025 indicano per OpenAI un rapporto crawl/referral di circa 750 a 1: per questo distinguiamo i bot che portano visitatori da quelli che raccolgono solo dati, e li riportiamo entrambi al Suo team anziché trattare tutto il traffico IA allo stesso modo.

Come sono i primi 90 giorni di AEO tecnico?

Nelle settimane uno e due mappiamo l'accesso dei crawler e rilasciamo le correzioni urgenti a robots.txt e CDN. Dalla settimana tre alla otto affrontiamo rendering, schema e scoperta. Dalla settimana nove alla dodici verifichiamo tutto nei log e impostiamo i ricontrolli dopo i rilasci futuri.

Gran parte del valore iniziale arriva dalle correzioni degli accessi, dato che OpenAI afferma che OAI-SearchBot recepisce le modifiche a robots.txt in circa 24 ore. Il lavoro sul rendering richiede più tempo perché dipende dal Suo ciclo di rilascio e dal numero di template in uso. Al giorno 90 dispone di una mappa degli accessi dei crawler, di evidenze nei log prima e dopo, di uno schema pulito sui template chiave e di un breve runbook che i Suoi sviluppatori possono seguire dopo ogni rilascio.

Se sta preparando il lancio di un prodotto, programmiamo i controlli prima dell'annuncio, così le nuove pagine sono scansionabili, presenti nelle sitemap e inviate tramite IndexNow fin dal primo giorno. Il lavoro specifico per ciascun motore, come la SEO per Perplexity o gli AI Overviews di Google, può poi poggiare su un accesso che sa per certo essere funzionante.

Le serve un file llms.txt?

Può aggiungerne uno con poca spesa, ma non si aspetti che cambi le citazioni. Jeremy Howard di Answer.AI ha proposto llms.txt nel settembre 2024, e John Mueller di Google ha dichiarato che nessuno dei servizi IA ha detto di usarlo, paragonandolo al meta tag keywords.

È davvero utile per la documentazione per sviluppatori letta dagli agenti di programmazione, ed è per questo che le aziende di IA ne pubblicano uno per la propria documentazione. Per un sito di marketing lo consideriamo un riordino facoltativo, da fare dopo il vero lavoro sugli accessi.