Blog Resmi Webmaster Google
Blog dan informasi resmi mengenai perayapan dan pengindeksan, alat webmaster Google dan juga tips webmaster lainnya.
Pengujian file robots.txt jadi lebih mudah
Senin, 21 Juli 2014
Membuat dan memelihara file robots.txt yang benar terkadang cukup sulit. Sementara kebanyakan situs mempermudahnya (kiat: sering kali situs tidak memerlukan file robots.txt!), menemukan perintah dalam file robots.txt yang besar yang saat ini atau dulu memblokir URL individual bisa jadi cukup sulit Untuk menjadikannya lebih mudah, sekarang kami mengumumkan
alat pengujian robots.txt
terbaru di Alat Webmaster.
Anda dapat menemukan alat pengujian terbaru di
Alat Webmaster
di bagian Perayapan:
Di sini Anda akan melihat file robots.txt yang aktif, dan dapat menguji URL baru untuk melihat apakah URL itu dilarang dirayapi. Untuk memandu Anda melalui perintah yang rumit, alat akan menyorot salah satunya yang mengarah ke keputusan akhir. Anda dapat melakukan perubahan dalam file dan mengujinya juga, cukup unggah versi baru ke server Anda, setelah itu biarkan perubahan tersebut berlaku. Di situs pengembang kami terdapat
lebih banyak informasi tentang perintah robots.txt dan cara file diproses
.
Selain itu, Anda dapat meninjau versi file robots.txt yang lebih lama, dan melihat kapan masalah akses menghalangi kami untuk melakukan perayapan. Misalnya, jika Googlebot melihat kesalahan server 500 untuk file robots.txt, biasanya kami akan menjeda perayapan lebih lanjut dari situs web Anda.
Karena mungkin ada beberapa kesalahan atau peringatan yang ditampilkan untuk situs yang sudah ada, sebaiknya Anda memeriksa kembali file robots.txt tersebut. Anda juga dapat menggabungkannya dengan bagian lain Alat Webmaster: contohnya, Anda mungkin menggunakan
alat Ambil sebagai Google
terbaru untuk merender laman penting di situs web. Jika ada URL terblokir yang dilaporkan, Anda dapat menggunakan penguji robots.txt ini untuk menemukan perintah yang memblokirnya, lalu, tentu saja, memperbaikinya. Masalah umum yang kami lihat berasal dari file robots.txt lama yang memblokir CSS, JavaScript, atau konten seluler — sering kali ini mudah diperbaiki setelah Anda memeriksanya.
Kami harap alat terbaru ini memudahkan Anda untuk menguji & memelihara file robots.txt. Jika Anda memiliki pertanyaan atau membutuhkan bantuan untuk menyusun serangkaian perintah yang baik, jangan ragu untuk mengunjungi
forum bantuan webmaster
kami!
Ditulis oleh Asaph Arnon, Webmaster Tools team
Label
#nohacked
4
#tanyatentangsearch
4
AJAX
1
alat webmaster
16
algoritme
6
AMP
10
aplikasi
6
apps indexing
2
Bali
1
chrome
2
chromium
1
cuplikan
1
data terstruktur
3
discover
1
DMOZ
1
domain property
1
dynamic rendering
1
forum
1
gambar
1
Google
1
Google Analytics
1
Google Berita
1
Google News
2
Google Search
1
google search console
2
Google Webmaster Conference
1
Googlebot
1
hreflang
3
images
1
Indonesia
1
Jakarta
1
kinerja situs
12
lanjutan
12
laporan webspam
1
menengah
16
mobile first indexing
2
pedoman webmaster
17
pemula
18
penjelajahan aman
1
perayapan dan pengindeksan
18
peretasan
4
pertimbangan ulang
4
Q&A
1
rendering dinamis
1
Rich Card
1
safe browsing
2
search console
15
sekuriti
19
seluler (mobile)
30
SEO
4
snippets
1
spam
7
speed
2
structured data
5
tanggal
1
tanya jawab
1
tautan
6
tips umum
51
webmaster
1
Webmaster Conference
1
webmaster tools
1
webspam
1
webspam report
1
wmc
1
Archive
2021
Feb
2020
Nov
Sep
Agu
Jul
Jun
Mei
Apr
Mar
Feb
Jan
2019
Nov
Okt
Sep
Jun
Mei
Apr
Mar
Feb
Jan
2018
Des
Nov
Okt
Jul
Jun
Mei
Apr
Mar
Feb
Jan
2017
Des
Nov
Sep
Agu
Jun
Apr
Mar
Jan
2016
Des
Nov
Okt
Sep
Agu
Jul
Jun
Mei
Apr
Mar
Jan
2015
Des
Nov
Okt
Sep
Agu
Jul
Mei
Apr
Mar
Feb
Jan
2014
Nov
Okt
Sep
Agu
Jul
Jun
Feed
Follow @googlewmc
Mobile-Friendly Test
Hey! Rankings in mobile search results changed on
April 21st
.
Check here if your site is mobile-friendly.
Give us feedback in our
Product Forums
.
Hey! Rankings in mobile search results changed on April 21st.
