ai.txt è un file di direttive pensato per gli agenti AI, sul modello del robots.txt, che indica quali risorse possono essere accedute dai crawler e dagli assistenti intelligenti.
Il file specifica i percorsi consentiti (endpoint API, sitemap AI, file llms.txt) e i percorsi vietati (come l’area amministrativa). Primary Source genera e aggiorna automaticamente ai.txt per ogni sito, guidando GPTBot, Claude-Web, PerplexityBot e gli altri crawler verso i dati strutturati dell’azienda.