Guia per a principiants de l’optimització per a IA (AIO)

Published in

Durant els últims mesos, he tingut nombroses converses amb clients que em pregunten com optimitzar la seva presència específicament per a plataformes de cerca impulsades per IA i chatbots com ChatGPT i Claude.

L’interès en aquesta àrea ha crescut notablement, i amb bon motiu: des que ChatGPT va integrar capacitats de cerca al web, he observat personalment increments significatius en el trànsit provinent d’aquestes noves fonts impulsades per IA. Alguns dels meus clients ja reben entre un 0,5% i fins a un 6% del seu trànsit orgànic total d’aquestes plataformes d’IA, cosa que posa de manifest l’impacte que aquesta tendència ja està tenint.

Un exemple especialment interessant és el d’un client B2B SaaS la presència del qual en plataformes d’IA és molt asimètrica respecte de la cerca tradicional. Tot i que els seus resultats a Google són sòlids, a Perplexity tenen un posicionament excepcional i esdevenen la font més citada per a moltes consultes clau, generant un volum de trànsit important. Cal destacar que el sector B2B SaaS està emergint com un dels que més es beneficien del trànsit impulsat per IA.

Pel que fa a l’optimització per a IA—concretament, per optimitzar la presència en els anomenats Large Language Models (LLMs)—, la veritat és que encara estem en una fase inicial. No ho sabem tot, però hi ha alguns aspectes clau que sí que coneixem i que ja hauríem d’aplicar per assegurar-nos d’estar ben posicionats en aquest nou panorama.

1. Permeteu el rastreig per part dels LLM

Un dels primers i més crítics passos per optimitzar de cara als LLM és garantir que el vostre lloc web sigui rastrejable. És sorprenent la quantitat de webs que actualment bloquegen rastrejadors d’aquests models d’IA, sovint sense adonar-se que això afecta negativament la seva visibilitat potencial.

Per il·lustrar-ho, comparteixo la història d’una empresa on vaig treballar. El seu Chief Product and Technology Officer (CPTU) va decidir unilateralment, sense considerar cap consell expert ni les dades disponibles, bloquejar l’accés dels rastrejadors d’IA a tots els webs de la companyia, simplement perquè no li agradava que la IA rastregés aquestes propietats i no confiava en OpenAI específicament.

Irònicament, malgrat aquesta postura, la companyia va adoptar internament la tecnologia d’OpenAI en diversos equips per millorar i donar poder als seus propis productes. Aquesta decisió va ser força hipòcrita i va acabar perjudicant la seva visibilitat en plataformes impulsades per IA a llarg termini.

Per assegurar que el vostre lloc estigui efectivament optimitzat:

  • No bloquegeu els LLM via robots.txt: Permeteu explícitament el rastreig per a tots els bots rellevants, inclòs, però no limitat a, ChatGPT.
  • Comproveu que el vostre CDN no bloquegi rastrejadors: Les Xarxes de Distribució de Contingut (CDN) poden impedir, sense voler, que els bots accedeixin al contingut; reviseu-ne la configuració per evitar-ho.
  • Eviteu bloquejar recursos importants: Assegureu-vos que CSS, JavaScript, imatges i altres recursos essencials siguin accessibles.

Facilitar l’accés als rastrejadors no només ajuda els LLM a entendre el vostre contingut; també és crucial per a sistemes de Retrieval-Augmented Generation (RAG), on els models d’IA recuperen i citen directament el contingut de les vostres pàgines web. Sense accés adequat, el vostre contingut simplement no apareixerà.

2. Faciliteu el descobriment amb XML Sitemaps

A diferència de Google Search Console o Bing Webmaster Tools, plataformes com OpenAI o Claude encara no disposen de consoles per a administradors de llocs web. Això vol dir que heu de facilitar que el vostre lloc sigui fàcil de descobrir promovent el rastreig de manera proactiva:

  • Incloeu la URL del sitemap a robots.txt: Especifiqueu clarament la ubicació del vostre sitemap.
  • Unifiqueu les regles de rastreig: Idealment, feu servir les mateixes regles per a tots els user agents per garantir un comportament de rastreig coherent a totes les plataformes.

Tenint en compte que Bing alimenta nombroses plataformes d’IA com ChatGPT, Perplexity, Grok i Copilot, és especialment decebedor que Bing Webmaster Tools (BWMT) encara no ofereixi informació específica sobre el rastreig d’IA. Amb tot, invertir en l’optimització per a Bing cada cop s’identifica més amb optimitzar la visibilitat en IA.

3. Limiteu el contingut renderitzat al costat del client

El renderitzat al costat del client pot ser problemàtic per als LLM. Una anàlisi recent de Vercel posa en relleu limitacions importants en la capacitat dels rastrejadors d’IA per executar JavaScript. Les dades mostren que cap dels principals rastrejadors d’IA, inclosos GPTBot i Claude, actualment renderitza JavaScript, tot i que descarreguen els fitxers JavaScript (ChatGPT: 11,50%, Claude: 23,84% de les sol·licituds). Qualsevol contingut que depengui exclusivament del renderitzat al costat del client roman efectivament invisible per a aquests rastrejadors.

Per al contingut crític:

  • Prioritzeu el renderitzat al costat del servidor (SSR), la Regeneració Estàtica Incremental (ISR) o la Generació Estàtica de Llocs (SSG).
  • Mantingueu redireccions adequades i una gestió coherent de les URL per evitar un índex elevat d’errors 404, que sovint es produeixen amb rastrejadors d’IA com ChatGPT i Claude (cadascun al voltant del 34%).

Podeu trobar més detalls a Vercel’s comprehensive report on AI crawler behavior.

4. Gestionar proactivament la indexació

Més enllà del rastreig passiu, enviar de manera proactiva el vostre contingut als índexs de cerca tradicionals i d’IA us ofereix més visibilitat i control:

  • Implanteu sitemaps XML optimitzats i envieu-los a través de robots.txt.
  • Utilitzeu APIs com IndexNow i les URL Submission APIs de Bing: Us permeten senyalitzar directament contingut nou o actualitzat als índexs de cerca.

5. La importància d’un gran contingut i experiència

Els LLM són cada cop més sofisticats—probablement superant motors de cerca tradicionals com Google o Bing en la seva capacitat d’interpretar el contingut. No obstant això, la frescor continua essent decisiva, ja que aquests models d’IA encara depenen molt dels motors de cerca tradicionals, especialment Bing, per obtenir la informació més recent i actualitzada. Per tant, l’SEO continua essent imprescindible.

Invertir en contingut excel·lent i en experiències d’usuari fluides és més important que mai, ja que són factors clau que els models d’IA reconeixen i valoren cada cop més.

6. Controleu i optimitzeu la velocitat

La velocitat del lloc web té un impacte significatiu en l’eficiència del rastreig. Un lloc més ràpid permet que els rastrejadors descobreixin i indexin més contingut. Apunteu a una bona resposta del servidor amb un Time to First Byte (TTFB) de 500ms o menys per maximitzar l’eficiència tant dels rastrejadors tradicionals com dels d’IA.

7. Les dades estructurades: poden ser importants per a Google, però no per als LLM

Tot i que les dades estructurades segueixen sent crucials per a l’SEO tradicional—especialment a Google—, no sembla que influeixin de manera significativa en la vostra presència als resultats dels LLM avui dia:

  • Continueu implementant dades estructurades per a Google: Tot i que ara mateix no sigui un benefici directe per a l’optimització d’IA, encara milloren la visibilitat a Google.
  • No espereu que les dades estructurades millorin la vostra aparició en IA conversacional: Actualment, no sembla que afectin gaire la forma en què els LLM processen el contingut.

Recordeu que els LLM, bàsicament, “llegeixen” el contingut, de manera que no els importa la metainformació com l’Schema.

8. Feu seguiment de l’activitat dels bots a través dels logs

Monitoritzar regularment els vostres logs és essencial per entendre com els bots interactuen amb el vostre lloc:

  • Utilitzeu eines com Botify, Kibana d’ElasticSearch o altres programes d’anàlisi de logs per identificar problemes de rastreig, fer un seguiment del comportament dels rastrejadors i garantir que els bots d’IA descobreixin eficientment el contingut més important.

Conclusió

Encara som a les primeres etapes de comprendre exactament com els LLM descobreixen i prioritzen el contingut. Tot i així, hi ha una cosa clara: els principis fonamentals de l’AI Optimization (AIO) i l’SEO tradicional són sorprenentment similars. De fet, les qüestions tècniques gairebé no difereixen.

Per tant, continueu invertint en bones pràctiques d’SEO, creeu contingut excel·lent i assegureu una experiència d’usuari fantàstica. A més, ara podeu fer un seguiment de la vostra presència en cerques i converses impulsades per IA de manera similar a l’SEO tradicional, gràcies a les noves AI rank tracking tools que van sorgint.

El que sabem segur:

  • Permeteu un rastreig clar i exhaustiu.
  • Faciliteu l’accés a través de sitemaps i regles de rastreig unificades.
  • Prioritzeu el renderitzat al costat del servidor.
  • Gestioneu activament les vostres estratègies d’indexació de contingut.
  • Les dades estructurades segueixen sent beneficioses, però sobretot per als motors de cerca tradicionals.
  • Feu un seguiment acurat del comportament dels rastrejadors amb anàlisi de logs.
  • Prioritzeu la velocitat del lloc per a un rastreig eficient.

Ser visible en el món de l’optimització per a IA consisteix en tenir una base clara i accessible, combinada amb estratègies proactives d’indexació. Aquests fonaments constitueixen una base sòlida mentre explorem aquest entorn en evolució.

Si teniu interès a parlar sobre AIO, no dubteu a enviar-me un missatge o fer una café.