AI Crawler Log and Content Signals by TheSEO

AI Crawler Log and Content Signals WordPress-plugin die twee dingen doet die overal los van elkaar bestaan en zelden samen: laten zien welke AI-crawlers je pagina's ophalen, en vastleggen in robots.txt wat die crawlers met je inhoud mogen doen. Alles blijft in je eigen WordPress. De plugin doet geen enkel uitgaand verzoek, heeft geen account, geen dashboard elders en geen dienst erachter. Gemaakt door TheSEO. Wat hij doet Het logboek. Per ophaling een regel: welke crawler, welke pagina, welke HTTP-status je server teruggaf, en wanneer. Geteld per crawler en per pagina, over 7, 30 of 90 dagen of over alles, met vier tellers bovenaan, een staafje per dag en een CSV-export. De signalen. Per crawlersgroep drie schakelaars die zeggen of je inhoud gebruikt mag worden voor zoeken (search), als invoer voor een model (ai-input) en voor training (ai-train). Elke schakelaar heeft drie standen: ja, nee, en geen uitspraak. Wat er straks in robots.txt komt te staan zie je letterlijk in een voorbeeldvenster voordat je opslaat. Alles staat standaard op geen uitspraak en de robots.txt-uitbreiding staat standaard uit, dus installeren verandert nooit stilletjes wat crawlers te horen krijgen.