cloudflare

Months spent blaming an anti-bot; the culprit was an Indonesian ISP's DNS redirecting duckduckgo.com to Trustpositif.

TL;DR: Headless browser di Docker gagal membuka DuckDuckGo, dan penulis berbulan-bulan mengira penyebabnya anti-bot dan fingerprinting yang ekstrem. Ternyata cek nslookup sederhana membuktikan DNS ISP memalsukan jawaban resolusi, efek kebijakan Kominfo yang membelokkan port 53. Solusinya cuma satu flag: paksa container memakai DNS publik seperti 1.1.1.1.

A red "Couldn't fetch" status in GSC does not mean your sitemap is 404. Here is the server-side diagnosis order.

TL;DR: Status "Couldn't fetch" di GSC bikin panik, padahal pengecekan manual via curl membuktikan semua 147 URL sitemap mengembalikan HTTP 200. Cloudflare juga bersih karena log Security Events hanya mencatat request yang diblokir, bukan yang lolos. Sesuai dokumentasi Google, pesan itu cuma berarti fetch terakhir gagal alias antrian crawler, jadi cukup tunggu beberapa hari sebelum cek ulang.