CARA MENYEMBUNYIKAN BACKLINK DARI AHREFS, SEMRUSH, MOZ DAN MAJECTIC DARI INTIPAN CARA MENYEMBUNYIKAN BACKLINK DARI AHREFS, SEMRUSH, MOZ DAN MAJECTIC DARI INTIPAN - SUARA HARIAN OTO BEMO BERODA TIGA
Suara Harian Oto Bemo Beroda Tiga

Komunikasi, Media Ilmu & Pengetahuan Umum Blogging

Langsung ke konten utama

"OTO BEMO.. OTO BEMO.. BERODA TIGA .. TEMPAT BERHENTI.. DITENGAH TENGAH KOTA..PANGGIL NONA..PANGGIL NONA..NAIK KERETA..NONA BILANG..TIDAK PUNYA UANG.. JALAN KAKI SAJA"

CARA MENYEMBUNYIKAN BACKLINK DARI AHREFS, SEMRUSH, MOZ DAN MAJECTIC DARI INTIPAN

Pada postingan kali ini saya akan berbagi tips memblokir perayapan bot crawl dari alat-alat SEO seperti ahrefs, majestic, moz dan semrush yang biasa dipakai oleh mastah-mastah untuk melihat footprint backlink, keyword potensial pada suatu website/blog. 

Siapa sih yang suka di intipin? risih kali ya kalau tiba-tiba muncul similiar site yang isinya mengambil apa yang terbaik dari website/blog kita doang khususnya pada artikel-artikel yang potensial mendatangkan trafik, tentunya ini bisa mengurangi kunjungan organik karena keyword kita ditiru oleh pesaing-pesaing apalagi kalau mereka memakai AGC mungkin peringkat anda bisa tersingkir dari halaman pertama google

Blogger jaman sekarang pinter-pinter, yang dulunya sekedar asal ngeblog kini hanya fokus membuat konten yang bisa mendulang keuntungan. Kebanyakan tutorial diforum-forum telah membahas penggunaan layanan SEO seperti ahrefs, semrush, moz dan majestic untuk mengintip backlink kompetitor, mengetahui daftar kata kunci bertrafic dengan tingkat persaingan middle pada situs kompetitor dan membongkar berbagai kelemahan lainnya

Karena hampir sebagian orang sudah melek internet, cepat atau lambat sebagai blogger mereka akan segera beradaptasi dengan layanan SEO service semacam ini. 

Sama dengan google yang menggunakan botcrawl untuk merayapi situs anda.

Layanan service SEO dari ahrefs, majestic, moz dan semrush juga menggunakan botcrawl untuk mengumpulkan data situs anda. Sebenarnya perilaku dari botcrawl bisa kita atur melalui robots.txt atau htaccess.. kita dapat menolak crawling yang berasal dari layanan service SEO seperti ahrefs, moz, semrush dan majestic dengan mudah tanpa harus takut kehilangan visibilitas digoogle.

Cara botcrawl bekerja

Bot bekerja dengan cara merayapi seluruh bagian halaman/url dari website anda untuk mengumpulkan data-data penting seperti perubahan konten, tautan perujuk/backlink, popular keywords, halaman baru dan sebagainya. Keberadaan botcrawl juga sering disebut dengan istilah crawl frontier

Keuntungan memblokir bot dari layanan SEO

Kompetitor tidak akan bisa melihat data-data dari situs anda seperti daftar backlink, trafik, skor domain, keyword potensial dan sebagainya. Kasian juga kalau kompetitor anda berlangganan paket lite $99/minggu diAhrefs kalau tidak bisa dipakai untuk menganalisis situs anda hehe

Kekurangan memblokir bot dari layanan SEO

Layanan SEO Service tidak hanya digunakan oleh kompetitor, pemilik website juga bisa berlangganan untuk memonitoring performasi website melalui halaman audit, itu termasuk menemukan broken link, element halaman penghambat bot crawl dari mesin pencari, tautan spam dan sebagainya

Cara memblokir bot crawl dari SEO Service

Anda bisa menggunakan robots.txt untuk memblokir nama agen dari bot layanan SEO tertentu, kebanyakan webmaster memang menggunakan robots.txt karena dianggap lebih mudah, cepat dan instruksi baris kodenya jelas

Kalau nama botcrawl dari mesin pencari google adalah googlebot, mediapartners-google

Sementara kalau dari layanan SEO, Majestic SEO -> User-agent: MJ12bot, MOZ OpenSiteExplorer -> User-agent: rogerbot, Ahrefs -> User-agent: AhrefsBot, Semrush -> User-agent: SemrushBot

Kalau anda pakai platform blogger masuk ke menu setelan > crawler dan pengindeksan > aktifkan robots.txt > paste teks berikut :

User-agent: Rogerbot

User-agent: Exabot

User-agent: MJ12bot

User-agent: SemrushBot

User-agent: Dotbot

User-agent: Gigabot

User-agent: AhrefsBot

User-agent: BlackWidow

User-agent: ChinaClaw

User-agent: Custo

User-agent: DISCo

User-agent: Download\ Demon

User-agent: eCatch

User-agent: EirGrabber

User-agent: EmailSiphon

User-agent: EmailWolf

User-agent: Express\ WebPictures

User-agent: ExtractorPro

User-agent: EyeNetIE

User-agent: FlashGet

User-agent: GetRight

User-agent: GetWeb!

User-agent: Go!Zilla

User-agent: Go-Ahead-Got-It

User-agent: GrabNet

User-agent: Grafula

User-agent: HMView

User-agent: HTTrack

User-agent: Image\ Stripper

User-agent: Image\ Sucker

User-agent: Indy\ Library

User-agent: InterGET

User-agent: Internet\ Ninja

User-agent: JetCar

User-agent: JOC\ Web\ Spider

User-agent: larbin

User-agent: LeechFTP

User-agent: Mass\ Downloader

User-agent: MIDown\ tool

User-agent: Mister\ PiX

User-agent: Navroad

User-agent: NearSite

User-agent: NetAnts

User-agent: NetSpider

User-agent: Net\ Vampire

User-agent: NetZIP

User-agent: Octopus

User-agent: Offline\ Explorer

User-agent: Offline\ Navigator

User-agent: PageGrabber

User-agent: Papa\ Foto

User-agent: pavuk

User-agent: pcBrowser

User-agent: RealDownload

User-agent: ReGet

User-agent: SiteSnagger

User-agent: SmartDownload

User-agent: SuperBot

User-agent: SuperHTTP

User-agent: Surfbot

User-agent: tAkeOut

User-agent: Teleport\ Pro

User-agent: VoidEYE

User-agent: Web\ Image\ Collector

User-agent: Web\ Sucker

User-agent: WebAuto

User-agent: WebCopier

User-agent: WebFetch

User-agent: WebGo\ IS

User-agent: WebLeacher

User-agent: WebReaper

User-agent: WebSauger

User-agent: Website\ eXtractor

User-agent: Website\ Quester

User-agent: WebStripper

User-agent: WebWhacker

User-agent: WebZIP

User-agent: Wget

User-agent: Widow

User-agent: WWWOFFLE

User-agent: Xaldon\ WebSpider

User-agent: Zeus

Disallow: /

Setelah itu simpan dan cek apakah aturan robots.txt yang baru sudah diterapkan atau belum. Caranya cukup tambahkan /robots.txt dibelakang nama domain

Contoh: https://otobemoberodatiga.com/robots.txt

Bagi pengguna wordpress bisa disetting melalui file .htaccess, buka cpanel > file manager > temukan file .htaccess (kalau tidak ketemu buka menu settings > show hidden files)

Paste kode berikut dibawahnya :

SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot

SetEnvIfNoCase User-Agent .*exabot.* bad_bot

SetEnvIfNoCase User-Agent .*mj12bot.* bad_bot

SetEnvIfNoCase User-Agent .*dotbot.* bad_bot

SetEnvIfNoCase User-Agent .*gigabot.* bad_bot

SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot

SetEnvIfNoCase User-Agent .*sitebot.* bad_bot

<Limit GET POST HEAD>

Order Allow,Deny

Allow from all

Deny from env=bad_bot

</Limit>

Setelah itu cek blog/website anda apakah sudah berhasil memblokir perayapan dari layanan service SEO intip backlink Ahrefs atau belum, 

Ceknya disini https://ahrefs.com/robot menyembunyikan backlink dari ahrefs, apa sudah diblokir ?

Yang lainnya ceknya disini :

https://www.semrush.com/bot/

https://www.mj12bot.com/

Persaingan sengit dalam dunia SEO memang tidak terelakkan lagi mengingat google hanya membatasi 10 hasil result terbaik disetiap halamannya, SEO bukan hanya tentang bagaimana mencapai halaman pertama google tetapi juga bagaimana menjadi lebih baik dari kompetitor anda saat ini

Kenapa statusnya masih allow?

Anda mungkin harus menunggu sampai 1x24 jam hingga penerapan robots.txt yang baru benar-benar diaplikasikan ke website/blog anda

Kenapa ketika dianalisis hasilnya tidak null, padahal botcrawlnya sudah diblokir?

Ini karena layanan SEO seperti Ahrefs masih menyimpan data anda dari hasil analisis sebelumnya

Demikian artikel mengenai cara memblokir perayapan bot dari layanan Service SEO Ahrefs, Majectis, Moz dan Semrush. Semoga apa yang saya bagikan bermanfaat terlepas dari pro dan kontra selama ini. Cara cepat menghasilkan uang dari blog/website adalah dengan banyak melakukan riset, mengambil apa yang terbaik dari kompetitor (footprint backlink, keyword) dan tentunya menjaga kesehatan website kita sendiri dengan layanan SEO Audit Tools. Baca juga : Format-gambar-terbaik-untuk-menjaga



Bagaimana Reaksi Anda Tentang Artikel Ini?

Komentar

POPULAR POST

MENGAPA GOSIP DIKANTOR MEMBUNUH PRODUKTIVITAS

Mengapa Gosip di Kantor Membunuh Produktivitas? Bermula dari satu hal, satu orang ke orang lainnya lambat laun sebuah infomasi terus bertambah kontennya. Informasi tersebut akhirnya berubah menjadi gosip. Gosip di kantor merupakan hal yang tidak bisa dipastikan kebenarannya. Seringkali hal tersebut justru dimulai dari rasa iri hati, frustrasi, kurang percaya diri, bahkan yang terburuk adalah candaan semata. Itu tentu saja berdampak sangat buruk. Tidak hanya bagi orang yang menjadi bahas pembicaraan, namun juga bagi pembicara. Jika diibaratkan dengan sepasang kayu dan paku. Paku sebagai rumor buruk yang Anda bicarakan dan kayu sebagai orang yang dibicarakan. Anda memukulkan paku tersebut kepada kayu hingga menyakitinya. Bahkan meskipun Anda telah mencabut paku tersebut, lubang tersebut masih saja tersisa. Seperti inilah luka yang diakibatkan oleh rumor buruk yang Anda perbuat terhadap seseorang. Membicarakan hal buruk mengenai sesama kita dapat menyebabkan sakit hati bagi s...

DELAPAN INDIKATOR BLOG DIANGGAP SPAM DAN DIHAPUS OLEH GOOGLE

Untuk situs berita dan belanja otomotif, lihat Weblogs, Inc. Untuk spamming yang dilakukan melalui komentar di blog yang sah, lihat Spam di blog. Blog spam, juga dikenal sebagai blog otomatis atau splog neologisme, adalah blog yang penulis gunakan untuk mempromosikan situs web terafiliasi, untuk meningkatkan peringkat mesin telusur dari situs terkait, atau sekadar menjual tautan/iklan. Tujuan dari splog bisa untuk meningkatkan PageRank atau portofolio backlink situs afiliasi, untuk meningkatkan tayangan iklan berbayar dari pengunjung (lihat blog dibuat untuk AdSense atau MFA), dan/atau menggunakan blog sebagai outlet tautan untuk menjual tautan atau membuat situs baru diindeks. Blog spam biasanya merupakan jenis situs pengikis, di mana konten sering berupa teks yang tidak asli atau hanya dicuri (lihat pengikisan blog) dari situs web lain. Blog-blog ini biasanya berisi sejumlah besar tautan ke situs-situs yang terkait dengan pembuat splog yang sering kali merupakan situs web yang tidak ...

CARA MEMASANG WIDGET ARTIKEL TERBARU THUMBNIL PADA HALAMAN BLOG

Navigasi judul pada blog sangatlah penting, dengan adanya navigasi pembaca dapat dengan mudah melihat semua isi dari blog tersebut. selain itu juga pembaca menjadi lebih nyaman karena tidak perlu bingung jika ingin mencari artikel lainnya. salah satu widget yang dapat membantu navigasi pada blog adalah widget artikel terbaru.  Bagi seorang blogger, ada beberapa komponen yang perlu diperhatikan saat membuat dan mengelola apa yang disuguhkan dalam isi blognya. Agar pengunjung tertarik dengan isi blog kita dan betah berlama-lama membacanya, kita mesti memaksimalkan fitur-fitur widget yang telah tersedia, termasuk di antaranya yaitu pemasangan halaman widget Recent Post/ Artikel Terbaru/   Postingan Terbaru. Keuntungan dari memasang widget ini adalah pengunjung dapat melihat dan memilih artikel-artikel terbaru dari blog kita. Dengan adanya widget recent post ini, pengunjung akan dibuat penasaran untuk membaca artikel-artikel lain dari blog kita.  Untuk tampilannya sendir...

Privacy Policy

Kebijakan Privasi SUARA HARIAN OTO BEMO BERODA TIGA Di SUARA HARIAN OTO BEMO BERODA TIGA, dapat diakses dari https://otobemoberodatiga.blogspot.com, salah satu prioritas utama kami adalah privasi pengunjung kami. Dokumen Kebijakan Privasi ini berisi jenis informasi yang dikumpulkan dan dicatat oleh SUARA HARIAN OTO BEMO BERODA TIGA dan bagaimana kami menggunakannya. Jika Anda memiliki pertanyaan tambahan atau memerlukan informasi lebih lanjut tentang Kebijakan Privasi kami, jangan ragu untuk menghubungi kami. File Log SUARA HARIAN OTO BEMO BERODA TIGA mengikuti prosedur standar menggunakan file log. File-file ini mencatat pengunjung ketika mereka mengunjungi situs web. Semua perusahaan hosting melakukan ini dan merupakan bagian dari analisis layanan hosting. Informasi yang dikumpulkan oleh file log termasuk alamat protokol internet (IP), jenis browser, Penyedia Layanan Internet (ISP), cap tanggal dan waktu, halaman rujukan/keluar, dan mungkin jumlah klik. Ini tidak terkait dengan infor...

SUARA HARIAN OTO BEMO BERODA TIGA

KATA PENGANTAR  Puji syukur kami panjatkan kehadirat Tuhan Yang Maha Esa karena dengan rahmat, karunia, serta taufik dan hidayah-Nya saya dapat membuat blog/site tentang apa saja yang menarik bagi penggemar membaca dengan baik meskipun banyak kekurangan didalamnya. Dan juga kami berterima kasih pada Bapak, Ibu, Saudara (i) selaku pelanggan Suara Harian Oto Bemo Beroda Tiga yang telah memberikan masukan kepada saya. Tak lupa juga ucapan terima kasih kepada teman - teman blogger telah ikut turut serta membantu dalam proses pemblo gingan ini. Saya juga menyadari sepenuhnya bahwa di dalam dunia bloging ini terdapat kekurangan dan jauh dari kata sempurna. Oleh sebab itu, saya berharap adanya kritik, saran dan usulan demi perbaikan blog/site yang telah saya buat untuk di masa yang akan datang, mengingat tidak ada sesuatu yang sempurna tanpa saran yang membangun. Semoga blog/site sederhana ini dapat dipahami bagi siapapun yang membacanya. Secara struktur, sistematis dan masif blog/site ya...