Any-Tools.net
Nemokamas konverteris

robots.txt Generatorius

Akimirksniu sugeneruokite robots.txt failą savo svetainei. Pridėkite vartotojo agento taisykles, leisti / neleisti kelius, tikrinimo delsą ir svetainės schemos URL. Nemokamas realaus laiko robots.txt generatorius.

Pridėti taisyklę

Sugeneruotas robots.txt

Susiję įrankiai

Peržiūrėti visus įrankius

„Hreflang“ žyma Generatorius

Generuokite „hreflang“ žymas tarptautiniam SEO. Kurkite HTML nuorodų žymas, HTTP antraštes arba XML svetainės schemos įrašus daugiakalbėms svetainėms. Nemokamas hreflang žymų generatorius.

OG žyma Generatorius

Generuokite „Open Graph“ metažymes „Facebook“, „Twitter“ ir „LinkedIn“. Nemokamas OG žymų generatorius su tiesiogine socialinės kortelės peržiūra.

„Twitter“ kortelės žyma Generatorius

Generuokite „Twitter“ kortelės metažymes, kad galėtumėte geriau dalytis socialiniuose tinkluose X („Twitter“). Nemokamas žymų generatorius su tiesiogine peržiūra ir kopijavimu į mainų sritį.

Schemos žymėjimas (JSON-LD) Generatorius

Generuokite savo svetainės struktūrinių duomenų schemos žymėjimą (JSON-LD). Nemokamas JSON-LD generatorius, palaikantis straipsnį, vietinį verslą, produktą, DUK puslapį, įvykį ir kt.

Apie šį įrankį

robots.txt yra paprasto teksto failas, esantis svetainės šaknyje, nurodantis tikrintuvams, kuriuos kelius jie gali aplankyti ir kurių turėtų vengti. Formatas datuojamas 1994 m. ir yra palaikomas beveik visose paieškos sistemose ir gerai veikiančiose tikrinimo programose. Failas yra patariamasis – kenkėjiški tikrintuvai jo nepaiso, tačiau teisėti tikrintuvai (Google, Bing ir kt.) patikimai laikosi jo nurodymų.

Įprasti naudojimo būdai: tikrinimo programų blokavimas iš administravimo sričių (/wp-admin/, /admin/), briaunuotų paieškos URL parametrų, kurie sukuria pasikartojančio turinio, išskyrimas, sustojimo ar kūrimo kelių indeksavimas, svetainės schemos vietos deklaravimas ir konkrečių naudotojų agentų leidimas blokuojant kitus. Failas skaitomas kiekvieno tikrinimo seanso pradžioje.

Šis generatorius sukuria sintaksiškai teisingą robots.txt iš formos įvesties. Įprasti šablonai (leisti viską, blokuoti visus, blokuoti konkrečius kelius) yra šablonai; Kiekvienam vartotojo agentui galima pridėti pasirinktines taisykles. Išvestis patenka į jūsų svetainės šaknies /robots.txt.

Kodėl verta naudoti robots.txt generatorių

Ranka rašant robots.txt yra klaidų. Sintaksės klaidos (didžiųjų ir mažųjų raidžių jautrumas, tikslus kelio atitikimas, taisyklių išdėstymas) tyliai sukelia netinkamą elgesį – keliai, kuriuos norėjote blokuoti, lieka tikrinami arba keliai, kuriuos norėjote indeksuoti, išskiriami. Tinkamą sintaksę sukuriantis generatorius šių spąstų išvengia.

robots.txt taip pat subtiliai sąveikauja su kitais SEO įrankiais. Neleidus kelio robots.txt, jis nebus rodomas paieškos rezultatuose (Google gali indeksuoti URL jo neaptikdama); meta noindex reikalauja, kad puslapis būtų patikrintas pirmiausia. Žinojimas, kurį įrankį naudoti kokiam tikslui svarbu; generatorius gali jums padėti.

Kaip naudoti

Pasirinkite šabloną, tinkinkite, įdiekite.

  1. Pasirinkite pradinį šabloną: Leisti viską (numatytasis tikrinimo-viskas poza), Blokuoti viską (blokuoti viską, kad nebūtų indeksavimo) arba Pasirinktinis (pradėkite nuo jūsų nurodytų taisyklių).
  2. Pridėkite vartotojo agento taisykles: Neleisti konkrečių kelių visoms tikrinimo programoms arba konkretiems pavadintiems robotams (Googlebot, Bingbot, GPTBot). Kiekvienas vartotojo agento blokas turi savo Leisti ir Neleisti direktyvų rinkinį.
  3. Pridėti svetainės schemos URL: Įtraukite absoliutų XML svetainės schemos URL. Tikrinimo programos tai naudoja norėdami rasti URL, kuriuos kitu atveju galėtų praleisti.
  4. Išsaugokite ir įdiekite: Atsisiųskite sugeneruotą failą. Įkelkite į savo domeno šaknį (taigi jis bus rodomas adresu https://example.com/robots.txt). Patvirtinkite apsilankę šiuo URL naršyklėje.

Įprasto naudojimo atvejai

Techninės detalės

Formatas: Vartotojo priemonė: <vardas>, po kurios pateikiamos leisti / neleisti direktyvos. * atitinka visus robotus. Konkretūs pavadinimai („Googlebot“, „Bingbot“) taikomi konkrečioms tikrinimo programoms. Keli vartotojo agento blokai gali sukrauti taisykles.

Neleisti: <kelias> blokuoja kelius, prasidedančius nurodytu priešdėliu. Neleisti: / blokuoja visą svetainę. Neleisti: /admin/ blokuoja bet ką, esantį /admin/. Užpakalinis pasvirasis brūkšnys; Disallow: /admin (be pasvirojo brūkšnio) taip pat atitinka /administrator.

Nuskaitymo delsa (sekundėmis) reikalauja lėtesnio tikrinimo. Svetainės schema (absoliutus URL) deklaruoja jūsų svetainės schemos vietą. # pradeda komentaro eilutę.

Geriausia praktika

Dažnai užduodami klausimai

Ar galiu tinkinti sukurtą išvestį?
Taip. Įrankis siūlo įvairias tinkinimo parinktis, kad būtų galima pritaikyti išvestį pagal jūsų konkrečius poreikius. Prieš generuodami pakoreguokite nustatymus arba atkurkite naudodami skirtingas parinktis.
Ar sugeneruotu turiniu galima naudotis nemokamai?
Taip. Viską, ką sukuriate naudodami šį įrankį, galite naudoti asmeniniais, švietimo ar komerciniais tikslais be jokių apribojimų ar priskyrimo reikalavimų.
Ar tam reikia paskyros?
Ne. Įrankis paruoštas naudoti iš karto, neprisiregistravus, be el. pašto ir registracijos. Tiesiog atidarykite puslapį ir pradėkite generuoti.
Ar mano įvesties duomenys yra privatūs?
Taip. Visas apdorojimas vyksta jūsų naršyklėje. Jūsų įvesties duomenys ir sugeneruota išvestis niekada nesiunčiami į jokį išorinį serverį.
Kaip užblokuoti vieną robotą, bet leisti kitiems?
Atskiri vartotojo agento blokai. Vartotojo agentas: BadBot ir Disallow: / blokuoja BadBot. Vartotojo agentas: * su Leisti: / leidžia kitiems.
Ar robots.txt skiriamos didžiosios ir mažosios raidės?
Kelio atitikimas yra didžiosios ir mažosios raidės. Neleisti: /Adminas neatitinka /admin. Suderinkite tikrąsias URL didžiąsias ir mažąsias raides.
Ar tikrinimo delsa iš tikrųjų sulėtina „Google“?
„Google“ negerbia tikrinimo delsos. Ji gerbia tikrinimo greičio nustatymus sistemoje „Search Console“. Kiti tikrintuvai („Bing“, „Yandex“) gerbia tikrinimo delsą.
Ar mano duomenys įkelti?
Ne. Generacija vyksta jūsų naršyklėje.

Related Articles

Content & SEO

Text & SEO Tools Every Content Creator Needs

A practical guide to text analysis and SEO tools including word counters, keyword density checkers, case converters, and readability analyzers for content creators and marketers.

8 min readPrivacy & Technology

Why Browser-Based Tools Are the Future: No Installs, No Uploads, No Risk

Discover why browser-based tools are replacing desktop software and cloud uploads. Learn how client-side processing keeps your files private while delivering powerful functionality.

7 min read