Besplatni alati
Proverite da li ChatGPT, Claude i Perplexity mogu da čitaju vaš sajt
Unesite sajt. Čitamo robots.txt i llms.txt, ulazimo na početnu stranu kao svaki AI bot i pokazujemo šta prolazi, uz klasičnu SEO proveru stranice.
Šta radi ova provera
- Čita robots.txt i primenjuje pravila na svakog AI bota kao što to rade oni (RFC 9309: prvo njegova grupa, zatim grupa „*”, pobeđuje najduže pravilo).
- Ulazi na početnu stranu sa pravim User-Agent-om svakog pretraživača i poredi odgovor sa običnim pregledačem. Tako se vide Cloudflare i firewall pravila koja blokiraju AI bez vašeg znanja.
- Proverava /llms.txt i /llms-full.txt po formatu llmstxt.org i testira linkove u njima.
- Broji reči koje postoje u HTML-u bez pokretanja JavaScript-a: to čita većina AI botova.
Botovi pretrage i botovi za obuku nisu isto
OAI-SearchBot, Claude-SearchBot i PerplexityBot čitaju stranice da bi odgovorili na pitanja i navode izvore. GPTBot, ClaudeBot, Google-Extended i CCBot skupljaju tekst za obuku modela. Možete zatvoriti obuku, a pretragu ostaviti otvorenom: sajt će se i dalje pojavljivati u AI odgovorima.
Šta je llms.txt
llms.txt je Markdown fajl u korenu sajta: naziv, jedan red o sajtu i lista ključnih stranica sa kratkim beleškama. AI asistenti ga koriste da razumeju sajt bez obilaska celog. Ne zamenjuje robots.txt ni sitemap.
Šta proverava SEO analiza
Dužinu title i description, canonical, meta robots, mobilni viewport, jezik, naslove H1–H6, količinu teksta i čitljivost, alt tekst slika, linkove, Open Graph i Twitter tagove, JSON-LD i greške HTML validacije.
Pitanja
Da li je besplatno?+
Da. Provera za AI je besplatna i bez registracije. SEO analiza daje posetiocima tri besplatne provere dnevno; registrujte se za više.
Zašto je bot blokiran ako ga robots.txt dozvoljava?+
robots.txt je samo molba. Server, CDN ili firewall i dalje mogu da odbiju bota po User-Agent-u ili IP adresi. Pravimo stvarnu posetu kao svaki bot da vidimo pravi odgovor.
Da li treba blokirati GPTBot?+
Zavisi od cilja. Blokiranje GPTBot-a sprečava obuku na vašim tekstovima, ali vas ne uklanja iz ChatGPT odgovora pretrage: za to je zadužen OAI-SearchBot. Većina firmi ostavlja botove pretrage otvorene.
Da li llms.txt pomaže rangiranju?+
Nijedan pretraživač to ne obećava. Pomaže AI asistentima koji ga čitaju da brzo razumeju sajt i povežu prave stranice. Dodaje se za deset minuta.
Da li čuvate podatke o mom sajtu?+
Rezultat čuvamo 24 sata da ponovljene provere ne opterećuju vaš server. Ništa drugo.
Ostali besplatni alati
llms.txt generator i validator
Napravite llms.txt iz sitemap-a za nekoliko sekundi i proverite postojeći po formatu llmstxt.org: naslov, kratak opis i linkovi. Besplatno, bez registracije.
Besplatna SEO provera sajta
Proverite bilo koju stranicu: title, description, naslove, slike, linkove, strukturirane podatke i HTML greške, i da li AI botovi mogu da je pročitaju.
Želite AI koji radi sa vašim sajtom i dokumentima?
INGDG povezuje AI sa vašim sadržajem i zadacima. Inženjer vam pomaže da sve podesite.
Probajte INGDG besplatno