Odakle ChatGPT, Claude, Gemini i Perplexity uzimaju izvore (2026)

Svaka AI tražilica izvore traži na svoj način: ChatGPT preko vlastitog crawlera OAI-SearchBot i vanjskih indeksa pretraživanja, Claude preko crawlera Claude-SearchBot i vanjske tražilice, Gemini i Googleovi AI pregledi preko običnog Googleova indeksa, a Perplexity preko vlastitog indeksa koji gradi PerplexityBot. Zato je ista stranica u jednoj tražilici vidljiva, a u drugoj nije.

Za tvrtku to znači da GEO optimizacija nije jedna postavka, nego nekoliko zasebnih vrata koja sva moraju biti otvorena. U nastavku je pregled po tražilicama, stanje u rujnu 2026., a službena dokumentacija navedena je u izvorima na kraju članka.

Tri vrste crawlera koje treba razlikovati

Većina AI pružatelja danas ima tri zasebna crawlera (robota). Razlikovanje je ključno jer ih u robots.txt postavljate pojedinačno:

Najčešća pogreška koju vidimo u pregledima: tvrtka nakon vijesti o „AI krađi sadržaja“ blokira sve AI crawlere zajedno — a time i one za pretraživanje, koji bi joj donijeli spominjanja.

ChatGPT (OpenAI)

Odakle izvori: pretraživanje u ChatGPT-u kombinira vlastiti indeks, koji gradi OAI-SearchBot, s vanjskim pružateljima pretraživanja. Neovisne analize pokazuju veliko preklapanje citiranih izvora s Bingovim rezultatima, pa je prisutnost u Bingu za ChatGPT važnija nego što bi se reklo po Bingovu udjelu u pretraživanjima.

Što urediti: dopustite OAI-SearchBot, prijavite stranicu u Bing Webmaster Tools i uključite IndexNow. GPTBot po želji možete blokirati — OpenAI izričito navodi da ne odlučuje o rezultatima pretraživanja.

Detaljan postupak je u članku Kako se pojaviti u ChatGPT-u: 7 koraka.

Claude (Anthropic)

Odakle izvori: Claude pri pretraživanju weba koristi vanjskog pružatelja pretraživanja. Anthropic ga u opisu funkcije ne imenuje, ali je na popisu podizvršitelja obrade naveden Brave Search, a neovisni testovi pokazuju veliko preklapanje Claudeovih citata s Braveovim rezultatima.

Što urediti: dopustite Claude-SearchBot i Claude-User. Provjerite je li stranica u Braveovu indeksu tako da je potražite na search.brave.com; Brave nudi i obrazac za prijavu URL-a. Anthropic objavljuje popis IP adresa svojih crawlera, što je korisno ako vaš vatrozid provjerava botove po IP-u.

Gemini i Googleovi AI pregledi (Google)

Google je jedini koji za AI pretraživanje nema zaseban crawler. AI pregledi (AI Overviews) i AI Mode izvore biraju iz običnog Googleova indeksa, koji gradi Googlebot. Google u dokumentaciji izričito piše da za prikaz u AI funkcijama pretraživanja nema dodatnih zahtjeva ni posebne optimizacije — stranica mora samo biti indeksirana i prikladna za prikaz s isječkom.

AI Mode pritom koristi tehniku grananja upita (query fan-out): jedno pitanje razbija na više povezanih pretraživanja po podtemama. Zato stranica koja odgovara na usko potpitanje može postati izvor, čak i ako za glavnu ključnu riječ nije visoko rangirana.

Google-Extended nije crawler, nego oznaka u robots.txt kojom ograničavate korištenje sadržaja za treniranje i utemeljivanje (grounding) u nekim drugim Googleovim AI sustavima, poput aplikacije Gemini. Prema Googleovoj dokumentaciji ne utječe na AI preglede u pretraživanju.

Što urediti: klasični tehnički SEO — indeksiranost, brzina, strukturirani podaci i jasni odgovori na pitanja. Tu se SEO i GEO najviše preklapaju.

Perplexity

Odakle izvori: Perplexity gradi vlastiti indeks crawlerom PerplexityBot, koji prema službenoj dokumentaciji nije namijenjen treniranju modela. Perplexity izvore uvijek prikazuje s brojčanim citatima, pa je najpregledniji i za mjerenje: odmah vidite koje je stranice upotrijebio.

Što urediti: dopustite PerplexityBot. Ako koristite vatrozid za web aplikacije (WAF), na popis dopuštenih dodajte službene IP raspone koje Perplexity objavljuje.

Microsoft Copilot

Copilot se oslanja na Bingov indeks i običan Bingov crawler (Bingbot). Zaseban AI crawler nema. Sve što napravite za Bing zbog ChatGPT-a vrijedi i za Copilot.

Sažetak: što dopustiti u robots.txt

Primjer robots.txt koji otvara pretraživanje i zatvara treniranje:

User-agent: OAI-SearchBot
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

Je li blokiranje treniranja smisleno, poslovna je odluka: blokada štiti sadržaj, ali znači i da će budući modeli o vama znati manje. Za većinu malih tvrtki koje žele biti prepoznate smislenije je treniranje dopustiti.

Zamka koju u robots.txt ne vidite

Ni ispravan robots.txt ne pomaže ako crawlere zaustavi sloj ispred njega: postavke Cloudflarea ili drugog CDN-a, sigurnosni dodaci u WordPressu ili pravila hostinga. Te su blokade često uključene prema zadanim postavkama i vlasnik stranice za njih ne zna. Crawler dobiva pogrešku 403, a u robots.txt sve izgleda u redu.

Jedini pouzdan test je posjetiti stranicu s identitetom pojedinog crawlera i provjeriti odgovor poslužitelja. Alat Pristup AI robota stranici to radi za sve gore navedene crawlere odjednom, a Cjeloviti pregled AI vidljivosti dodaje i provjeru llms.txt-a i GEO osnova.

Često postavljana pitanja

Koristi li ChatGPT Google ili Bing? ChatGPT koristi vlastiti indeks pretraživanja, koji gradi OAI-SearchBot, i vanjske pružatelje pretraživanja. Neovisne analize pokazuju veliko preklapanje njegovih citata s Bingovim rezultatima, pa je prisutnost u Bingu važna.

Koju tražilicu koristi Claude? Anthropic u opisu funkcije pružatelja pretraživanja ne imenuje, ali je na njegovu popisu podizvršitelja obrade Brave Search. Za vidljivost u Claudeu dopustite Claude-SearchBot i provjerite je li vaša stranica u Braveovu indeksu.

Blokira li Google-Extended AI preglede u Googleu? Ne. Google-Extended ograničava korištenje sadržaja za treniranje i utemeljivanje u nekim drugim Googleovim AI sustavima, a AI pregledi i AI Mode koriste običan indeks pretraživanja.

Moram li za vidljivost u AI tražilicama dopustiti crawlere za treniranje? Ne. GPTBot, ClaudeBot i Google-Extended namijenjeni su treniranju modela i ne odlučuju jeste li među izvorima u današnjim odgovorima. Za to su ključni crawleri za pretraživanje.

Kako provjeriti mogu li AI crawleri pristupiti mojoj stranici? Pregled robots.txt nije dovoljan jer crawlere može zaustaviti i CDN ili sigurnosni dodatak. Stranicu treba posjetiti s identitetom pojedinog crawlera i provjeriti odgovor poslužitelja, što radi besplatni alat Pristup AI robota stranici.

Izvori

• OpenAI: Overview of OpenAI Crawlers
• Anthropic: crawleri i njihovo blokiranje
• Perplexity: Perplexity Crawlers
• Google: AI funkcije i vaša web stranica

Sljedeći korak

Kad znate da vas crawleri mogu dosegnuti, na redu je sadržaj koji modeli citiraju. GEO pregled za AI tražilice pokazuje oboje u jednoj minuti. Pravila za crawlere, llms.txt i prijavu u Bing za vas uređujemo u paketu GEO Start za 490 €, a tehniku i sadržaj zajedno u cjelovitoj SEO i GEO optimizaciji.