Setting robots.txt dan Custom Robots Header Tags yang Aman Di Blogger

Cara mengatur robots.txt dan custom robots header tags (tag tajuk robot khusus) di Blogger (Blogspot) agar SEO friendly dan artikel cepat terindex.
Setting robots.txt dan Custom Robots Header Tags yang Aman Di Blogger

Pengaturan robots.txt dan tag tajuk robot khusus di Blogger bertujuan agar mesin pencari (search engine) mudah merayapi (crawling) blog, sehingga artikel lebih cepat terindex. Jika diatur dengan benar, maka blog akan menjadi SEO friendly. Sebaliknya, jika kurang tepat maka blog akan diabaikan oleh mesin pencari yang mengakibatkan artikel tidak muncul di hasil pencarian.

Oleh karena itu dibutuhkan settingan yang aman agar blog tidak mengalami efek negatif. Sebenarnya tidak perlu disetting pun robots.txt ini sudah aktif dengan sendirinya sejak blog pertama kali dibuat. Penerapan default inilah yang paling aman. Tapi kalau kamu mau melakukan konfigurasi tambahan, maka ikuti tutorial cara setting robots.txt di Blogger dibawah.


1. Cara Setting robots.txt Khusus di Blogger Agar SEO Friendly

Buka menu Settings » Search preferences » Crawlers and indexing » Custom robots.txt » klik Edit.
Cara Setting file robots.txt di Blogger Agar SEO Friendly

Pada pilihan Enable custom robots.txt content? pilih Yes. Selanjutnya masukkan settingan robots.txt yang aman berikut ini.
User-agent: *
Allow: /
Disallow: /search

Sitemap: https://www.blogkamu.com/sitemap.xml

Nama Keterangan
User-agent Nama robot mesin pencari (web crawler software).
Disallow Direktori atau halaman yang TIDAK DIIZINKAN DIRAYAPI oleh user-agent.
Allow Direktori atau halaman yang DIIZINKAN DIRAYAPI oleh user-agent.
Sitemap Lokasi sitemap. Ganti dengan alamat blog kamu.

Nama Keterangan
User-agent: *
Allow: /
Disallow: /search
Mengizinkan semua jenis user-agent untuk merayapi semua direktori, kecuali semua URL yang memiliki direktori /search. Contoh:
https://www.blogkamu.com/search?q=cara+mempercepat+blog
https://www.blogkamu.com/search/label/CSS
https://www.blogkamu.com/search?updated-max=2018-01-30T23%3A00%3A00%2B07%3A00&max-results=8#PageNo=2
Sitemap: https://www.blogkamu.com/sitemap.xml Memberitahukan pada robot perayap dimana lokasi sitemap berada.

Setelah selesai, klik tombol Save changes
Pengaturan robots.txt di Blogger Agar Artikel Cepat Terindex

1.1. Mencegah Perayapan Pada URL Halaman Tertentu

Nah, jika ada halaman khusus yang tidak ingin dirayapi, kamu tinggal menambahkannya pada Disallow. Contohnya seperti ini:
User-agent: *
Allow: /
Disallow: /search
Disallow: /p/kontak-lama.html
Disallow: /2009/01/test-postingan-pertama.html

Sitemap: https://www.blogkamu.com/sitemap.xml

Untuk mengecek apakah robots.txt sudah berubah dan sama dengan settingan diatas, buka URL berikut.
https://www.blogkamu.com/robots.txt


2. Mengatur Custom Robots Header Tags Di Blogger

Masih di menu yang sama yaitu Crawlers and indexing, di bagian Custom robots header tags klik Edit. Pada pilihan Enable custom robots header tags? pilih Yes. Samakan pengaturannya dengan gambar dibawah ini.

Cara Setting tag tajuk robot khusus di Blogger Agar Blog SEO Friendly

Keterangan:
  1. Mengizinkan mesin pencari untuk merayapi semua direktori homepage (beranda), post, dan pages (halaman statis).
  2. Tidak mengizinkan mesin pencari untuk merayapi direktori archive (arsip) dan search (pencarian) seperti yang sudah dijelaskan diatas.


3. Kenapa Direktori Achive (Arsip) dan Search (Pencarian) Tidak Dirayapi?

Karena direktori kedua halaman itu mengandung URL yang depannya sama.
Sudah dicontohkan diatas, direktori hasil pencarian adalah:
https://www.blogkamu.com/search?q=cara+mempercepat+blog
https://www.blogkamu.com/search/label/CSS
https://www.blogkamu.com/search?updated-max=2018-01-30T23%3A00%3A00%2B07%3A00&max-results=8#PageNo=2

dll masih banyak lagi sesuai jumlah artikel.

Format penulisan URL setelah homepage https://www.blogkamu.com selalu sama, yaitu diikuti oleh /search. Melarang robot merayapi direktori ini bertujuan untuk mencegah konten duplikat yang bisa berakibat terkena penalti dari mesin pencari.

Saya kira sudah jelas ya soal setting robots.txt dan custom robots header tags di Blogger ini. Saya bukan ahli SEO, jadi kalau ada yang salah harap koreksi dengan cara memberikan komentar dibawah.

https://support.google.com/webmasters/answer/6062596?hl=en&ref_topic=6061961
https://productforums.google.com/d/msg/blogger/oqTYevwSeK8/O7KIQDRzAAAJ
197
Setting robots.txt dan Custom Robots Header Tags yang Aman Di Blogger
Setting robots.txt dan Custom Robots Header Tags yang Aman Di Blogger
Cara mengatur robots.txt dan custom robots header tags (tag tajuk robot khusus) di Blogger (Blogspot) agar SEO friendly dan artikel cepat terindex.
Bagikan ke aplikasi lainnya:
  • WhatsApp
  • Telegram
  • Facebook
  • Twitter
  • Pinterest
  • LinkedIn

Artikel Terkait

197 komentar

  • Menulis kode gunakan <i>kode</i> (kode harus di-parse)
  • Menulis dalam syntax highlighter gunakan <em>kode panjang</em> (kode harus di-parse)
  • Menyisipkan gambar gunakan <strong>URL GAMBAR</strong> (ekstensi .jpg, .png, .gif, .webp, .ico)
  • Centang Beri Tahu Saya untuk mendapatkan notifikasi ke email saat ada yang membalas komentar.
  • RUIN
    18 Maret, 2024
    Profil: https://www.blogger.com/profile/11813874132007124877
    Komentar ini telah dihapus oleh RUIN selaku penulis.
  • Wahyudin Tamrin
    05 Maret, 2024
    Profil: https://www.blogger.com/profile/11172587261246679632
    Terimakasih. Artikelnya sangat bermanfaat buat saya yang sedang belajar ngeblog di www.wahyudintamrin.com
  • Sulaiman Azzuhdi
    05 Februari, 2024
    Profil: https://www.blogger.com/profile/11035511774218008051
    sangat bermanfaat www.gamesoft.eu.org
  • Hidangan berbuka
    04 Februari, 2024
    Profil: https://www.blogger.com/profile/03752440229087101938
    good,good
  • Islakhuddin
    19 Januari, 2024
    Profil: https://www.blogger.com/profile/06871973278825462721
    Terima Kasih ilmunya, sangat bermanfaat.
    Dan langsung saya terapkan ke Blog baru saya.

    Blog www.ilmusholawat.blogspot.com
  • Sanka
    09 November, 2023
    Profil: https://www.blogger.com/profile/11166801793788394270
    terimakasih infonya bang
  • Kafilah Sulawesi
    28 Oktober, 2023
    Profil: https://www.blogger.com/profile/00364042877269766710
    Terima kasih atas infonya kafilah sulawesi
  • uniwit
    16 Oktober, 2023
    Profil: https://www.blogger.com/profile/01335478621256863661
    Kak, kalo kode robot txt custom nya gak diisi cuma diaktifkan aja gpp kak? Trus kok pas saya ajukan untuk daftar adsense, bagian status ads.txt nya "tidak ditemukan" gpp begitu kak?
  • Admin
    09 Oktober, 2023
    Profil: https://www.blogger.com/profile/01206091626174903721
    Blog saya https://blogsia.eu.org susah keindeks
  • Yusriani, S.Pd., M.Pd.
    08 Oktober, 2023
    Profil: https://www.blogger.com/profile/12070529603846013489
    terima kasih infonya, semoga berdampak baik d blog sy
  • KoetainimeID
    02 Oktober, 2023
    Profil: https://www.blogger.com/profile/07155035260904494428
    sudah sesuai sama yang diatas. tapi tetap error. alamat url tidak valid. https://koetainimeid.blogspot.com/. bingung juga jadinya. tapi thanks infonya
    • Ilhamka - semblianinspirasi
      06 November, 2023
      Profil: https://www.blogger.com/profile/05607212606231418871
      udah nampil tuh di pencarian
  • AGAM DIGITAL
    09 September, 2023
    Profil: https://www.blogger.com/profile/00428381151459173273
    Terimakasih Tutorial bermanfaat
    agamriyandana.my.id
  • Ihya Umas
    28 Agustus, 2023
    Profil: https://www.blogger.com/profile/13509941062307515151
    blog saya sudah saya setting sesuai dengan instruksi di atas https://www.troolegacy.net tapi belum bisa top rank
  • Tegar Ramadhani
    22 Agustus, 2023
    Profil: https://www.blogger.com/profile/03076534435228550756
    Thanks infonya kak, btw mau nanya dong cara mengatasi meta desc di sitelink google search itu pake deskripsi postingan blog bukan pake meta desc di settingan blogger itu gmn ya? https://www.tentangtech.com
  • ‏‏‎
    05 Juli, 2023
    Profil: https://www.blogger.com/profile/08082385156204947598
    Terima kasih tutorialnya, butuh waktu berapa lama robot txt terindeks google?

    https://pandawacomputercirebon.blogspot.com/
  • Creative Insomniac
    29 Juni, 2023
    Profil: https://www.blogger.com/profile/08702945462210882871
    Terimakasih
    designskool.my.id
  • Anugrah
    26 Juni, 2023
    Profil: https://www.blogger.com/profile/06570778601942439372
    terima kasih tutornya bang salam

    https://mvidigitalpirinting.blogspot.com/
  • Maheer Pro
    22 Juni, 2023
    Profil: https://www.blogger.com/profile/17119881124956612922
    terimakasih ilmu nya suhu https://mixspamassageday.blogspot.com/ salam tempel
  • La Sadewa Blogue
    07 Juni, 2023
    Profil: https://www.blogger.com/profile/02943221463833217806
    blog saya tidak di index sama sekali oleh google kenapa ya?
    padahal sudah ada konten sejak bulan maret.

    terima kasih informasinya, sangat membantu.
  • SANG KELANA
    26 Mei, 2023
    Profil: https://www.blogger.com/profile/13948247650538372374
    terimakasih...info nya sangat membantu
  • adi.io
    07 Mei, 2023
    Profil: https://www.blogger.com/profile/09484728383208285274
    terimakasih kak sangat membantu salam bloger pemula www.tehnozu.com bantu ramaikan geh hehe
  • JELAJAHIN LABURA
    05 Mei, 2023
    Profil: https://www.blogger.com/profile/03635868406527224253
    Kak jika robot.txtnya tidak diatur . Bagaimanana kak?
    • Igniel
      05 Mei, 2023
      Profil: https://www.blogger.com/profile/09199170379661896200
      Gak apa-apa. Ini hanya pengaturan tambahan yang gak wajib.
    • JELAJAHIN LABURA
      25 Mei, 2023
      Profil: https://www.blogger.com/profile/03635868406527224253
      Kak apakah memasukan kode adsense harus di pharse dulu
  • Fahri Hidayat
    26 April, 2023
    Profil: https://www.blogger.com/profile/00401307027070955648
    thanks infonya kak, sangat membantu
  • Fauzi
    13 April, 2023
    Profil: https://www.blogger.com/profile/01097970405025748883
    Terimakasih Atas Pengetahuannya
    Salam dari: https://www.ceritablog.site
  • Qwerty7t
    09 April, 2023
    Profil: https://www.blogger.com/profile/08389923874291297417
    Terimakasih tutorialnya
  • JELAJAHIN LABURA
    08 April, 2023
    Profil: https://www.blogger.com/profile/03635868406527224253
    Komentar ini telah dihapus oleh JELAJAHIN LABURA selaku penulis.
    • Igniel
      09 April, 2023
      Profil: https://www.blogger.com/profile/09199170379661896200
      - Kalau blognya masih pakai domain bawaan "blogspot.com" bisa tanpa www.
      - Kalau sudah pasang custom domain, pakai www saja.
  • demit nii
    08 April, 2023
    Profil: https://www.blogger.com/profile/05275849050741049675
    terima kasih tutorialnya
    sangat membantu
    salam dari aniki.site
  • Kyauto Official
    05 April, 2023
    Profil: https://www.blogger.com/profile/12981013294592340468
    Terima kasih sangat membantu salam dari driftid.blogspot.com
  • Rahmat Hidayat
    04 April, 2023
    Profil: https://www.blogger.com/profile/14974403866301381664
    Makasih banyak kak igniel, jujur saya bingung kenapa blog saya Cikhidayat.com gabisa dirayapi oleh mesin pencari, eh ternyata robot.txt nya belum diatur. Semoga setelah ini bisa dirayapi sama mesin pencari dan bisa daftarin ke google adsense ehehe
  • Chengzi
    02 April, 2023
    Profil: https://www.blogger.com/profile/17977429245951380474
    Makasih gan baru berapa minggu ngeblog jadi masih nyari-nyari info buat nambah memperbagus blog ane.Sekali lagi terima kasih informasinya.
  • Lenza
    30 Maret, 2023
    Profil: https://www.blogger.com/profile/09774577957911878620
    Terimakasih atas informasinya yang sangat bermanfaat.

    www.zamanow.xyz
  • charma
    25 Maret, 2023
    Profil: https://www.blogger.com/profile/09916131249561716705
    thanks infonya, udah lama gak ngeblog gan. domain lama ke suspend sama lumendatabase, terpaksa bikin baru filmdrama.id
  • Bangrora
    20 Maret, 2023
    Profil: https://www.blogger.com/profile/02161526150488967216
    Sangat bermafaat kak, terimakasih banyak
  • Polma Roy Sihite
    04 Maret, 2023
    Profil: https://www.blogger.com/profile/10261015959352909191
    Komentar ini telah dihapus oleh Polma Roy Sihite selaku penulis.
  • Unknown
    28 Februari, 2023
    Profil: https://www.blogger.com/profile/00671465565448352371
    Terimakasih sangat bermanfaat... salam dari bebobin.com
  • Sabang Info Aktual Politik
    27 Februari, 2023
    Profil: https://www.blogger.com/profile/17857043187348339511
    masih relepan, cuma gambarnya punya jadul sekarang tampilan dashbor blogger sudah beda min. BTW. terimaksih tutornya
  • Dreamer
    21 Februari, 2023
    Profil: https://www.blogger.com/profile/02025149102557160111
    Terimakasih kak tutornya, soalnya saya baru buat blog hehe
  • perintis baihaqi jaya
    15 Februari, 2023
    Profil: https://www.blogger.com/profile/16506865446330098804
    Penjelasan singkat tapi nampol banget..lsg bisa aplikasi saya..
    Sukses lagi

    Cek2 kak kalo ada kurang:

    www.paletkayu.net
  • Sams
    09 Februari, 2023
    Profil: https://www.blogger.com/profile/12363730369083370382
    Terima kasih tutornya sudah berhasil menambahkan sitemap dan kustom robot.txt

    sayakasiharah.blogspot.com
  • Nazril Fahriannur
    01 Februari, 2023
    Profil: https://www.blogger.com/profile/03216732196023787438
    Terimakasih tutornya bang
  • J. Endiartia
    10 Januari, 2023
    Profil: https://www.blogger.com/profile/03643476464557850707
    Sitemap saya couldn't fetch di GSC. Kenapa ya kira-kira. Saya sudah buat sitemap juga. Setting blog di public. Blog saya di https://www.endiartia.my.id
    • Sarah Claudia
      05 Februari, 2023
      Profil: https://www.blogger.com/profile/04180507566580798735
      untuk domain my.id dianggap spam sama google gan.
  • Sayuko
    02 Desember, 2022
    Profil: https://www.blogger.com/profile/17174622439808890291
    ini masalahnya apa ya mba "Tidak dapat mengambil peta situs" udah 2 bulan Tidak dapat mengambil peta situs gitu terus udah di coba berbagai cara tapi gak berhasil, :(
  • alamnesia.com
    01 Desember, 2022
    Profil: https://www.blogger.com/profile/17365592229985376764
    Terimakasih, saya akan aplikasihan di blog saya www.alamnesia.com sukses selalu kak
  • MentizMR
    20 November, 2022
    Profil: https://www.blogger.com/profile/04352550808286712849
    Saya coba terapkan untuk blog baru saya, terimakasih juga buat tema nya saya pakai textrim
  • Area gaming
    12 November, 2022
    Profil: https://www.blogger.com/profile/09119194972615468678
    Bismillah, sudah saya terapkan sesuai dengan arahan di atas
  • Catatan Si Rebiaz
    30 Oktober, 2022
    Profil: https://www.blogger.com/profile/13141794493495094806
    Terima kasih ya,, sangat bermanfaat,,
  • Edy Abu Hanifah
    16 Oktober, 2022
    Profil: https://www.blogger.com/profile/08820158777778720350
    Terimakasih min, ini yang saya cari. awalnya bingung maksud dan setingan robot.txt itu untuk apa, sekarang setingan blog saya www.abuhanifahstore.my.id sudah saya sesuaikan seperti panduan di atas. terimakasih
  • ceritasipil
    11 Oktober, 2022
    Profil: https://www.blogger.com/profile/02333834678673068023
    memang membingungkan kalau masalah ini ya, tp terimakasih telah mencerahkan.
  • ADMIN MARKETPULSA
    10 Oktober, 2022
    Profil: https://www.blogger.com/profile/03983361941531363211
    Terima kasih
    www.marketpulsa.top
  • DJARUM88
    09 Oktober, 2022
    Profil: https://www.blogger.com/profile/15820245028162680003
    Thanks infonya min...bermanfaat untuk djarum88
  • Admin
    05 Oktober, 2022
    Profil: https://www.blogger.com/profile/11030422273228362729
    Konten nya up to date, simple dan mudah dimengerti... Thanks
  • InfoKawanKita
    30 September, 2022
    Profil: https://www.blogger.com/profile/15753346454410065572
    trims atas infonya mas
  • Polma Roy Sihite
    28 September, 2022
    Profil: https://www.blogger.com/profile/10261015959352909191
    terima kasih
  • MeeNiit.com
    10 September, 2022
    Profil: https://www.blogger.com/profile/11242050765389382327
    Terimakasih banyak infonya
  • Mahyuddin
    04 September, 2022
    Profil: https://www.blogger.com/profile/09440081512613886331
    jika berkenan mohon di buatkan artikel terbaru tentang ini karena tampilanya sekarang udah beda biar kami yang baru belajar bisa mengerti. terimakasih
  • Ajaykumar
    20 Agustus, 2022
    Profil: https://www.blogger.com/profile/06025645835743719387
    Sangat informatif
  • creator
    12 Juli, 2022
    Profil: https://www.blogger.com/profile/04346694499609746685
    makasih infonya kk
  • Harry Naga
    04 Juli, 2022
    Profil: https://www.blogger.com/profile/08476568569406367644
    ijin bertanya mbak. apakah meta tag noindex dan nofollow pada tag hmyl perlu dihapus?
    • Igniel
      05 Juli, 2022
      Profil: https://www.blogger.com/profile/09199170379661896200
      Kalau saya sih nggak dihapus ya.
  • Marwan Kholili
    04 Juli, 2022
    Profil: https://www.blogger.com/profile/06578398458405616198
    Terima kasih atas ilm7nya yang sangat bermanfaat
  • bukainfo
    03 Juli, 2022
    Profil: https://www.blogger.com/profile/10351861308623343480
    Maaf mbak igniel saya udah ngikutin sesuai , tapi di GSC dibilang Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag' tolong cek bukainfo.com
  • Saefu kawzuki
    01 Juli, 2022
    Profil: https://www.blogger.com/profile/12428770055585722133
    Maksih info bagus ini
  • ImanAja
    22 Juni, 2022
    Profil: https://www.blogger.com/profile/00764132496850125351
    makasih bang informasinya, sangat membantu
  • Admin-DT
    13 Juni, 2022
    Profil: https://www.blogger.com/profile/11122704885030870027
    Terimakasih informasinya
  • Hataken
    10 Juni, 2022
    Profil: https://www.blogger.com/profile/02423292130265278527
    permisi mbak.. kenapa ya sitemap saya tidak bisa di submit ke search console? padahal url sitemap sudah benar, tetapi status selalu "tidak dapat mengambil peta situs" terus mbak.

    Ini terjadi ke semua blog saya.
    https://media.discordapp.net/attachments/742273318195036220/984848399738212412/Screenshot_20220610-2253012.png
    • Igniel
      11 Juni, 2022
      Profil: https://www.blogger.com/profile/09199170379661896200
      Saya cek blognya private ya. Blog private memang gak bisa dibaca Google, termasuk sitemapnya. Wajib dibuat publik.
    • Mahyuddin
      04 September, 2022
      Profil: https://www.blogger.com/profile/09440081512613886331
      kasusnya sama mbak. gimana cara mengubahnya
  • Blogger Pemula
    27 Mei, 2022
    Profil: https://www.blogger.com/profile/13602359762490062424
    Terimakasih sudah membagikan cara mengisi robot.txt tersebut.
    yang saya tanyakan, jika ada artikel yang di tolak adsense dengan permasalahan ada artikel yang membahas tentang perang yang terjadi di ukraina, apakah bisa menggunakan disallow tersebut dan di ajukan kembali ke google AdSense ya kak? terimakasih.

    Kunjungi juga ke blog saya ya kak, ke https://www.belajarblog.my.id/
    • Igniel
      27 Mei, 2022
      Profil: https://www.blogger.com/profile/09199170379661896200
      Bisa dicoba kak. Pastikan artikelnya hilang dari SERP, baru ajukan ulang.
    • Blogger Pemula
      28 Mei, 2022
      Profil: https://www.blogger.com/profile/13602359762490062424
      siap.. makasih. Saya cobain lagi untuk pengajuan ke adsense. Semoga saja tidak ada kendala lagi untuk permasalahan tersebut..
  • Pusat Rehabilitasi Narkoba Premium
    27 April, 2022
    Profil: https://www.blogger.com/profile/12418425926453731643
    sudah terindex terimakasih
  • Teguh Reborn
    08 April, 2022
    Profil: https://www.blogger.com/profile/02929480832311013332
    index nya kira2 butuh berapa hari ya mas ?
  • Raja
    02 Maret, 2022
    Profil: https://www.blogger.com/profile/13089311636566914773
    Maaf sekali lagi tanya mbak, yang bagian sitemap itu apa harus kita buat halaman baru setelah mengisi robot txt dengan judul sitemap XML ... Soalnya punya saya setelah membuat sitemap jadi judulnya. Sitemap HTML
  • Raja
    02 Maret, 2022
    Profil: https://www.blogger.com/profile/13089311636566914773
    Maaf msh pemula, mau nanya mbak saya kan udah banyak bca di artikel lain juga, yang user agent media partner google kan itu Adsense, nah saya pernah juga baca kalo ada yang mengetikan di tombol pencarian blog kita, " Kata² yg tidak pantas " Adsense kita bisa kena pelanggaran, apakah bisa kita mengatur supaya google adsense gak bisa merayapi tombol pencarian di blog kita ? Supaya aman gitu. Dan cara penerapan penulisannya gimana ? Kalo bisa. Apa harus di tulis user agent: mediapartner google
    Disallow: /tombolpencarian misalnya begitu mbak ? Mohon pencerahannya mbak. Sekali lagi maaf masih pemula Makasih
    • Igniel
      12 Juni, 2022
      Profil: https://www.blogger.com/profile/09199170379661896200
      ((Disallow: /search)) sudah mengatasi itu.
  • M.Nurkholis
    27 Februari, 2022
    Profil: https://www.blogger.com/profile/14710897115802973322
    Mohon pencerahannya mbak, saya pakai robot.txt ini aman nggak ya?
    User-agent: *
    Allow: /
    Disallow: /search
    Disallow: /?m=1
    Disallow: /?m=0
    Disallow: /*?m=1
    Disallow: /*?m=0
    Disallow: /*/*/*.html?showComment=*

    Makasih mbak igniel
  • Muhammad Khaibar
    01 Februari, 2022
    Profil: https://www.blogger.com/profile/17343924465433268845
    mantap kakk infonya, boleh lah main-main ke website saya hehehe
  • Restu Singgih
    25 Januari, 2022
    Profil: https://www.blogger.com/profile/04730351927411012440
    saya sudah sesuaikan semua tapi di console issue error terus gimana ya
  • Ryan Setiawan
    10 Januari, 2022
    Profil: https://www.blogger.com/profile/13173224792557981312
    Makasih banget loh tutornya.. saya izin repost tutornya ya kak nanti kalo di perlukan.. maklum blogger baru.. nanti pasti tak kasih sumber tutornya kok.. sekali lagi terima kasih..
  • GayaWax Miranda
    01 Desember, 2021
    Profil: https://www.blogger.com/profile/03363621553231178895
    Mbak ini setting robot.txt berpengaruh dengan index google kan ya ?
    Sekarang google lagi susah index, udah gonta-ganti setting ga banyak ngaruh. Nyobain settingan mbak Igniel siapa tau manjur.

    Terima Kasih.
  • Anonim
    Anonim07 Oktober, 2021
    berapa kali coba, tapi emang index google lama ya? rasanya kok rada aneh...

    tapi artikel dan blognya bagus min. Kunjungan nya min, https://diarymasboy.blogspot.com
  • Admin
    12 September, 2021
    Profil: https://www.blogger.com/profile/05498183615108637997
    #Terimakasih mba, saya blogger pemula dan mencoba menrapkan ini semoga sehat selalu dan sukses
    #karirhub.blogspot.com {margin:0; padding:10px 15px}
  • Adi Cengres
    05 September, 2021
    Profil: https://www.blogger.com/profile/13558826883170399663
    Teria kasih kak atas informasinya. singkat,jelas dan padat.
  • tribun
    02 September, 2021
    Profil: https://www.blogger.com/profile/16633396085064635374
    semangattttttttttttt
  • Ghina
    26 Agustus, 2021
    Profil: https://www.blogger.com/profile/16957835296284601330
    Thanks kakkk baru paham aku
  • Admin
    03 Agustus, 2021
    Profil: https://www.blogger.com/profile/17704693309737041470
    Artikel yang sangat membantu penjelasan lengkap dan mudah dipahami, akhirnya ada solusi terkait masalah setting robots.txt yang benar terima kasih.

    Jika berkenan mampir ya kak
    ke blogku: httpss://www.guntur.eu.org
  • Winarno
    11 Juli, 2021
    Profil: https://www.blogger.com/profile/02226575747796343022
    Mumet... Mending facebookan 😂
  • Bgenx
    10 Juli, 2021
    Profil: https://www.blogger.com/profile/13534408267468139903
    SUdah saya terapkan pada blog saya mas,,

    Kunjungi blog saya di --> https://www.ketikanganas.my.id/

    slam kenal... sukses blogging..
  • Feri Nugroho
    03 Juli, 2021
    Profil: https://www.blogger.com/profile/02850461666676283713
    Mbak yang bener :
    versi 1:
    User-agent: *

    Disallow: /search
    Allow: /
    Sitemap: http://nama blog/sitemap.xml

    versi 2:
    User-agent: *
    Allow: /
    Disallow: /search

    Sitemap: http://nama blog/sitemap.xml

    Atau keduanya sama saja dan gak ada efek, seperti allow:/ yang versi 1 sama yg versi 2.
    terima kasih mbak
  • Djefi Febian
    27 Juni, 2021
    Profil: https://www.blogger.com/profile/01677557629330387247
    Mba, menurut mas indrak (indrak ada di youtube, https://www.youtube.com/watch?v=enLsHMl8K3M), pada disallow tidak diusah isi apa apa, sekarang google sudah lebih pintar, jadi tidak akan dianggap duplikat content, benarkah?
  • Seputar Pedia
    17 Juni, 2021
    Profil: https://www.blogger.com/profile/16674551834049100073
    kak pake template apa.. bagus sekali
  • Aplikasi Mod
    07 Mei, 2021
    Profil: https://www.blogger.com/profile/08055835080243633277
    Makasih
  • Muhammad Hafiz
    06 Mei, 2021
    Profil: https://www.blogger.com/profile/00327264751896687434
    Thx mba, tutor nya
    https://www.ghostxcode7-news.my.id
  • Saif Ghofur
    30 April, 2021
    Profil: https://www.blogger.com/profile/04924137136364466463
    Untuk ?m=1 apakah perlu di disallow ??
  • Teknik Workshop
    17 April, 2021
    Profil: https://www.blogger.com/profile/08376732983676330542
    Terima kasih nona ignel....ai love u
  • caraseo
    11 April, 2021
    Profil: https://www.blogger.com/profile/12924354793694779474
    Mantap lah bolanazry
  • Admin
    09 April, 2021
    Profil: https://www.blogger.com/profile/00364100700861599561
    mba... tolong aku. dulu aku pakai domain ngubaidillah.com,,, udah banyak artikel yang masuk ke google search. karena aku belum pengalaman, akhirnya ganti domain, menjadi "my.id" yang murah. eh ternyata langsung ga ada pengunjung organik. step apa saja yang harus kulakukan? terimakasih
    • PayuBaco
      11 April, 2021
      Profil: https://www.blogger.com/profile/02293372772988889351
      Bantu jawab, coba diredirect aja mas, semua url blog lama ke url blog yang baru. Tutorialnya bisa cari di google banyak. Semoga segera teratasi masalahnya.
    • SIMPANG suwir
      12 September, 2021
      Profil: https://www.blogger.com/profile/16454733113647103109
      di Google Search Console bisa disetting perubahan domain. Itu yang membantu perayapan. Kalau belum paham coba browsing cara submit ke Google Search Console.
  • Caraservis
    05 April, 2021
    Profil: https://www.blogger.com/profile/12082572390460100000
    Saya akan coba cara di atas.. Dan saya mo nanya sitemap di webmaster tidak update gimana caranya.. Makasih.. Soalnya masalah ini ter jadi di salah satu blog saya.. Yang lain tetap update..
  • Hilman Ubaydillah
    03 April, 2021
    Profil: https://www.blogger.com/profile/16724958637828226540
    widih manfaat
  • Toko Website 99
    28 Maret, 2021
    Profil: https://www.blogger.com/profile/05702066782265858064
    terima kasih buat ilmunya, sangat bermanfaat buat siapa saja. lanjutkan berbaginya
  • Arif Rudiantoro
    12 Maret, 2021
    Profil: https://www.blogger.com/profile/08153473975321332891
    Terimakasih Mbak Igneal,
    Langsung praktek,
    Meskipun bentuk setinggan blogspot sudah berubah, berusaha memahami hehe
  • Dan's
    01 Maret, 2021
    Profil: https://www.blogger.com/profile/02530752554636797063
    Komentar ini telah dihapus oleh Dan's selaku penulis.
  • Lintas Alam Sentul
    25 Februari, 2021
    Profil: https://www.blogger.com/profile/17483477030948533862
    Mas minta saran donk blog saya udah oke belum yah, tolong di check donk https://lintasalamsentul.blogspot.com/
  • Anonim
    Anonim13 Februari, 2021
    Mbak Igniel udah cantik , pinter , baik hati lagi ..
  • Halo Tukang
    11 Januari, 2021
    Profil: https://www.blogger.com/profile/12023743968976634866
    Kak igniel saya mau tanya apa bisa dipengaturan
    User-agent: * apakah bisa untuk mengecualikan template (template magify) yang menggunakan {getMega}%20$label ?

    https://semarinteriorjasatukangrenovasirumah.blogspot.com/2020/10/{getMega}%20$label={xxxxxx}.
    terimakasih
  • Majuterus
    06 November, 2020
    Profil: https://www.blogger.com/profile/10754746311293864698
    makasih gan sudah berbagi ilmu, soalnya saya ini korban search console yang membingungkan
  • Agung Betariko
    01 Oktober, 2020
    Profil: https://www.blogger.com/profile/12701806457857868392
    Coba dulu ah, baru pertama kali nyobain nih..Makasih kakak Igniel..
  • Ali Hyuuga
    13 Agustus, 2020
    Profil: https://www.blogger.com/profile/06361308303600420638
    mbak, ko pas di ceh https://blog saya/robot.txt malah jadi halaman 404

    tolong kasih pencerahannya
    • PayuBaco
      05 Februari, 2021
      Profil: https://www.blogger.com/profile/02293372772988889351
      Bagian blog saya nya diubah ke url blog mas nya.
  • Muhammad Tahir Habib
    14 Mei, 2020
    Profil: https://www.blogger.com/profile/11642191808857583763
    bagaimana menyebutkan "class" dari postingan di meta tag?
  • HabibSH
    10 Mei, 2020
    Profil: https://www.blogger.com/profile/13506737370216205058
    terima kasih banyak bang igneal, tapi kenapa saya masih "diindeks,meski diblokir oleh robots.txt ?
  • ilmuit
    17 April, 2020
    Profil: https://www.blogger.com/profile/08356925560396477205
    wah jadi tau ilmu baru makasih ya mba igniel
  • apps
    17 April, 2020
    Profil: https://www.blogger.com/profile/12705552802253689198
    makasih mba ilmunya
  • emma anhar
    09 April, 2020
    Profil: https://www.blogger.com/profile/00824507546758437844
    terima kasih mbak, sangat membantu artikelnya.....
  • Droidide
    28 Maret, 2020
    Profil: https://www.blogger.com/profile/14943304334673207353
    Mbak kok blogku waktu di akses gkbisa misal http://www.blogku.com/robot.txt
  • Omer.D
    19 Maret, 2020
    Profil: https://www.blogger.com/profile/16852246400224178492
    Pantesan aja ,blog saya blog archive di search engine kalau dicek. Dulu setting tapi kenapa hilang sendiri, dan hari ini saya sering lagi. Terimakasih infonya. Moga berkah ilmunya
  • Dewangga Setiawan
    09 Maret, 2020
    Profil: https://www.blogger.com/profile/10258787197324729672
    masih berlaku kah di tahun 2020?
  • SakitMata
    27 Februari, 2020
    Profil: https://www.blogger.com/profile/09393004848170758598
    Terimakasih infonya mba
  • Kartiko Syla Alda
    03 Januari, 2020
    Profil: https://www.blogger.com/profile/03638798802684686973
    Permisi mau tanya, gimana cara mengisi bagian allow nya ya? Dan bagaimana kalau tidak diisi?
  • Yudha Wibowo
    03 Januari, 2020
    Profil: https://www.blogger.com/profile/17119349223402740662
    Mba Igniel , setelah mengikuti tutorial setting robot txt ini , selanjutnya saya mendapati notifikasi Liputan -> Diindeks, meski diblokir oleh robots.txt pada webmaster google, apakah ini akan ada pengaruhnya pada blog saya ? bagaimana cara menghilangkan notif tersebut tanpa harus men disallow kan search robot txt tersebut ?

    Mohon penjelasannya , salam :) terimakasih.
    • Igniel
      03 Januari, 2020
      Profil: https://www.blogger.com/profile/09199170379661896200
      Dicek dulu halaman atau URL yang diblokirnya. Apakah itu halaman search, label, dan arsip?
      Kalau iya, biarkan. Ketiga halaman itu memang nggak perlu diindeks karena nggak bagus.

      Kalau bukan itu, jabarkan lagi keterangan lengkapnya
    • Yudha Wibowo
      03 Januari, 2020
      Profil: https://www.blogger.com/profile/17119349223402740662
      Iya betul mba , notifikasi tersebut muncul untuk halaman /search/label/ , jadi tetap dibiarkan (abaikan) saja ya mba dan tidak perlu diperbaiki.. tapi apakah nanti kedepannya akan ada pengaruh di mesin pencari ? karena pastinya jumlah ini nanti akan terus meningkat..
  • Yudha Wibowo
    07 Desember, 2019
    Profil: https://www.blogger.com/profile/17119349223402740662
    Mantap.. artikelnya sangat membantu, cuma saya mau tanya apakah akan ada perbedaan index di google jika sitemapnya di tulis contoh seperti ini :

    Sitemap: https://yudha-wibowo.blogspot.com/sitemap.xml

    atau memang harus seperti ini :

    Sitemap: https://www.yudha-wibowo.blogspot.com/sitemap.xml

    jadi apakah harus dengan www atau langsung saja , apakah nanti hasilnya akan berbeda ?

    Mohon jawabannya admin, terimakasih..
    • Igniel
      07 Desember, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Kalau masih pake domain blogspot TIDAK PERLU pakai www
    • Yudha Wibowo
      07 Desember, 2019
      Profil: https://www.blogger.com/profile/17119349223402740662
      Oke Baik.. Terimakasih mba Igniel atas jawabannya, sangat membantu.. :)
  • Abe (Jurnalabe.com)
    17 November, 2019
    Profil: https://www.blogger.com/profile/10355952919538524323
    mau tanya, kak. kalau tiba2 artikel baru di blog nggak bisa terindex itu penyebabnya apa ya?

    sekarang tiap submit artikel baru di google search control, tulisannya selalu "crawled - currently not indexed". Padahal nggak ada settingan robot. txt yg saya rubat. settingan sitemap di google search control pun nggak saya apa2in sama sekali..

    Apa perlu submitan sitemap saya yg lama dihapus semua, trs disubmit ulang dr awal lagi?

    Adakah tips-nya untuk masalah blog saya ini kak? makasih banyak ya sebelumnya
    • PayuBaco
      05 Februari, 2021
      Profil: https://www.blogger.com/profile/02293372772988889351
      Saya juga mengalami hal yang sama untuk saat ini, gimana mas apakah sudah bisa diatasi? Jika sudah bagaimana caranya?
    • Rangga Syahrul Ramadhan
      17 Maret, 2021
      Profil: https://www.blogger.com/profile/16597627745013693946
      Saya juga mengalami hal yang sama, apakah sudah ketemu solusinya mas...? sekarang lebih susah dibanding 2 tahun kebelakang
  • nurlellamusic.blogspot.com
    15 Oktober, 2019
    Profil: https://www.blogger.com/profile/07828469287538582287
    Terima kasih informasinya gan. Anw, templet blognya bagus nih. Keren
  • Muhammad Rafli
    08 Oktober, 2019
    Profil: https://www.blogger.com/profile/02873186839157360548
    Mantap sekali tutornya mba igniel
  • FF tutorial
    26 September, 2019
    Profil: https://www.blogger.com/profile/12721704988029786236
    Thanks infonya. Saya blogger newbie, coba cek blog saya kak Cloud Heaven Liquid Official, sudah bagus belum ya?
  • Mas Dejay
    24 September, 2019
    Profil: https://www.blogger.com/profile/12991200391127524245
    makasih kak
  • Kia Meliala
    08 September, 2019
    Profil: https://www.blogger.com/profile/16053603420855032628
    User-agent: Mediapartners-Google

    Mediapartners-Google itu maksudnya apa yaa ?
    Apa aja itu Mediapartner nya google
    • Igniel
      08 September, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Bot buat AdSense.
      Kalau tanda bintang (*) artinya udah mencakup semua, termasuk Mediapartners-Google.
  • Iman Fauzy
    06 September, 2019
    Profil: https://www.blogger.com/profile/00125236838850887337
    kalo blog yang ini pake yang mana mba?
  • pak goe kim
    19 Agustus, 2019
    Profil: https://www.blogger.com/profile/15847319925257433522
    terima kasih ilmunya bermanfaat
  • SUPRAPTO
    16 Agustus, 2019
    Profil: https://www.blogger.com/profile/00356781236737261330
    Sudah saya terapkan. Terima kasih.
  • Anonim
    Anonim14 Agustus, 2019
    Terimakasih.. sangat membantu
  • Khatami
    14 Agustus, 2019
    Profil: https://www.blogger.com/profile/13159108141269610162
    mbak mau nanya kalo custom domain yg url blogspot aslinya ikut di kirim sitemap & robot.txt gk?
    misal custom domainb: abce.com
    url blogspotnya : abce.blogspot.com
    dua duanya dikirim apa satu aja?
    • Igniel
      14 Agustus, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Satu aja. Pakai domain yang sedang digunakan.
  • Bakulers 48
    13 Agustus, 2019
    Profil: https://www.blogger.com/profile/18120865878812087229
    makasih mantap artikelnya bisa diterapkan di blog jualan saya
  • Kanjeng Mariyadi Ngawi
    11 Agustus, 2019
    Profil: https://www.blogger.com/profile/04856905821293514049
    Thanks Pencerahan yang sangat membantu mbak igniel
  • Anonim
    Anonim06 Agustus, 2019
    Thanks gan membantu sangad.
  • Admin
    31 Juli, 2019
    Profil: https://www.blogger.com/profile/09188399858089813264
    kalau kaya gini

    User-agent: Mediapartners-Google
    Disallow:
    User-agent: Googlebot
    Disallow: /search
    Disallow: /?m=1
    Disallow: /?m=0
    Disallow: /*?m=1
    Disallow: /*?m=0
    User-agent: *
    Disallow: /search
    Sitemap: URL BLOG/sitemap.xml

    disarankan tidak ?
  • marco
    30 Juli, 2019
    Profil: https://www.blogger.com/profile/06771541447784841190
    Terima kasih mas sudah berbagi ilmu semoga kedepanya dapat begai info terus.
  • VanBija27
    29 Juli, 2019
    Profil: https://www.blogger.com/profile/07335145707638754088
    Terima kasih banyak atas infonya, benar2 bermanfaat, semoga kedepannya terus berbagi info2 seperti ini khususnya buat kami para pemula...terimakasih ya bu, sukses terus buat anda, salam kenal.
  • Handy Rusandi
    28 Juli, 2019
    Profil: https://www.blogger.com/profile/09411952026515715905
    saya kadang menemukan artikel dengan penulisan :

    User-agent: *
    Disallow: /search
    Allow: /

    apa bedanya antara penerapan Disallow: /search yang di tengah dan diakhir ?
    apakah sama atau berbeda ?
    • Igniel
      28 Juli, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Sama saja. Yang penting isi dari allow dan disallownya.
  • Admin
    27 Juli, 2019
    Profil: https://www.blogger.com/profile/09188399858089813264
    maaf mau nanya
    di webmaster punya saya ada Dikecualikan oleh tag ‘noindex’ itu terjadi pada
    urlblogsaya/search/label/C
    karena saya memasang meta tag pada template blog nya..apakah itu berpengaruh untuk blog saya di mata google dan apakah harus di hapus meta tag itu ??

    kemudian ada Di-crawl - saat ini tidak diindeks pada
    urlblogsaya/feeds/posts/summary
    cara ngatasi nya gimana yah ??

  • Ansar Zainuddin
    15 Juli, 2019
    Profil: https://www.blogger.com/profile/12101136358743297751
    Mantap mas artikelnya sangat mencerahkan. salam sukses
  • Admin
    15 Juli, 2019
    Profil: https://www.blogger.com/profile/02702532805371669144
    Kalo Muncul gini harus Gimana gan

    https://www.domainsaya .com/sitemap.xml Sitemap index Jul 11, 2019 Nov 15, 2017 1 error

    Sitemap index can be read, but has errors
    General HTTP error
  • Siti Tutut Yuliana
    14 Juli, 2019
    Profil: https://www.blogger.com/profile/00725255827030116095
    Masih bingung yah kak
  • Kanjeng Mariyadi Ngawi
    13 Juli, 2019
    Profil: https://www.blogger.com/profile/04856905821293514049
    Mbak igniel, saya mau tanya

    Saya menerapkan sitemap.xml pada setting robot saya.


    Apakah di peta situs hanya cukup 1 saja? (Sitemap.xml)

    Ataukah di peta situs saya boleh menambahkan peta situs lain?

    Saya saat ini memkai 14 peta situs mbak . namun kayaknya blog saya terabaikan oleh mesin pencari.


    Mohon pencerahannya
    • Igniel
      13 Juli, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Boleh lebih tapi yang terbaca sebenarnya cuma satu aja, yaitu sitemap.xml.

      Selengkapnya bacs di sini:
      https://www.igniel.com/2019/05/cara-submit-sitemap-google-search-console.html
  • SaudaraMaya
    06 Juli, 2019
    Profil: https://www.blogger.com/profile/11763339734647400503
    terimakasih sangat membantu sekali artikelnya
    www.saudaramaya.blogspot.com
  • iTekno
    02 Juli, 2019
    Profil: https://www.blogger.com/profile/15905318081684323823
    Mantul
  • anbusenja
    24 Mei, 2019
    Profil: https://www.blogger.com/profile/14383015803964013677
    makasih min infonya ^_^
  • TKMUTIARAIBUNDASKJ
    04 Mei, 2019
    Profil: https://www.blogger.com/profile/15202327256403749037
    makasih hu
  • Bangtax
    07 April, 2019
    Profil: https://www.blogger.com/profile/08481799969280531731
    itu di bagian sitemap nya, ga usah ditambah allow: / mba?
  • eva
    04 April, 2019
    Profil: https://www.blogger.com/profile/04776639647480858661
    wah wah, baru tau
  • Ahsa
    02 April, 2019
    Profil: https://www.blogger.com/profile/07252865558601287802
    Mantap, tutor yang disarankan seperti bungfrangki (Y)
  • Anti Gaptek
    31 Maret, 2019
    Profil: https://www.blogger.com/profile/05162607115035103991
    Makasih gan, ane coba ya
  • Parsika
    28 Maret, 2019
    Profil: https://www.blogger.com/profile/12291413646895087111
    mba, kalau ini gimana ? katanya mesti pake mediapartner, mohon pencerahannya

    User-agent: Mediapartners-Google
    Disallow:

    User-agent: *
    Disallow: /search
    Allow: /

    Sitemap: https://www.example.com/feeds/posts/default?orderby=updated
    • Igniel
      07 Juli, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Kalau saya nggak usah. User-agent dengan bintang (*) artinya mencakup semua jenis user agent, termasuk Mediapartners-Google.
    • Saif Ghofur
      18 April, 2020
      Profil: https://www.blogger.com/profile/04924137136364466463
      Hnya gini mbk 👇

      User-agent:
      Disallow:
      Allow:

      Sitemap

      Biar kyak AdSense, bing, dll bisa ngindex?
  • Info Loker Serang
    26 Maret, 2019
    Profil: https://www.blogger.com/profile/13053526579674995497
    lebih bagus yang defaul atau tang ini mba igniel?
  • Admin
    25 Maret, 2019
    Profil: https://www.blogger.com/profile/08731874234297226694
    Hadeh pusing mikirin SEO nil, dulu mah waktu ngeblog jaman 2012an saya mah menangan di pencarian Google, cuman sekarang dah pada lupa trik-triknya, soale dah lama fakum, dan baru mulai lagi ngeblog 2018 akhir, sekarang mah lagi fokus ke konten aja lah, eeeeh eeeeeh ehhh malah curhat... Lagi test sama domain baru .info heee
  • Windy Yohara
    08 Maret, 2019
    Profil: https://www.blogger.com/profile/17663820910109385859
    setelah 4 bulan ngeblog baru ini dapet artikel yang detail menjelaskan ttg robot.txt, dan saya baru tahu kalau robot saya salah sehingga terjadilah canonical issue yang membuat banyak artikel saya gagal diindex
    terimakasih banyak mbak igniel
    https://healthyfurther.blogspot.com/
  • Anonim
    Anonim08 Maret, 2019
    Pengaruh untuk SEO dan rank tidak?
  • Insan Biasa
    05 Maret, 2019
    Profil: https://www.blogger.com/profile/14800207698710460130
    Saya mau bertanya apa bedanya pakai sitemap.xml dengan feeds/posts/default pada robot txt? Mana yang lebih bagus hasilnya?
    • Windy Yohara
      08 Maret, 2019
      Profil: https://www.blogger.com/profile/17663820910109385859
      bantu jawab ya... yang standard google ya yang xml, tetapi google juga menyarankan sitemap dari pihak ketiga ... spt yg kamu tulis itu.. intinya sama saja
    • Aldo L.S.
      01 Juli, 2019
      Profil: https://www.blogger.com/profile/13117385228856430729
      nah, untuk site xml sendiri itu cuma untuk yang self-hosted aja apa yang ngeblog melalui media Blogger juga bisa ya ?? soalnya saya cukup ragu dengan sitemap saya, saya menggunakan Blogger dan saat membuat sitemap juga menggunakan feeds/posts/default gitu ? yang saya takutkan nanti kalo menggunakan sitemap.xml gak kehubung kemana-mana soalnya saya bikin sitemap menggunakan feeds/posts/default, mohon pencerannya kakak-kakak.
    • Igniel
      01 Juli, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Sitemap di robots.txt itu akhirannya harus pake .xml
      Jadi pilih yang blog.com/sitemap.xml
  • Anonim
    Anonim06 November, 2018
    Terimakasih artikelnya sangat membantu saya. Dan sekarang saya lebih mengerti tentang bagaimana cara mengatur custom robot.txt
  • Unknown
    08 Agustus, 2018
    Profil: https://www.blogger.com/profile/15652906289403216667
    untuk settiing robot.txt agc blogspot gmn mba?
    • Igniel
      08 Agustus, 2018
      Profil: https://www.blogger.com/profile/09199170379661896200
      User-agent: *
      Disallow:

      Sitemap: https://www.blogkamu.com/sitemap.xml


      Di custom robots header, bagian archive and search page centang ALL. Lainnya kosongkan.


    • Sakti
      23 Maret, 2019
      Profil: https://www.blogger.com/profile/16028105200911967298
      kok di gambar All nya gak di centang bu ?.
    • Igniel
      28 Maret, 2019
      Profil: https://www.blogger.com/profile/09199170379661896200
      Mas di atas tanya buat AGC, kakek. Sedangkan di gambar bukan buat AGC.
  • Mas Kholis
    27 Juli, 2018
    Profil: https://www.blogger.com/profile/02889398110311460807
    Igniel juga menerapkan cara diatas ya?