llms.txt: File Kecil yang Mulai Menentukan Apakah AI Merekomendasikan Domain Kamu atau Tidak

June 27, 2026 · By DomainScope

Sudah lama kita terbiasa dengan robots.txt dan sitemap.xml. Dua file itu jadi standar baku — semua orang pasang, semua crawler baca. Tapi ada file baru yang mulai muncul di radar, dan mayoritas pemilik domain belum tahu keberadaannya: llms.txt.

Bukan file wajib. Belum ada standar resmi dari Google atau W3C. Tapi relevansinya sedang tumbuh cepat — terutama kalau kamu peduli dengan bagaimana AI seperti ChatGPT, Perplexity, atau Gemini memahami dan merepresentasikan sebuah situs di dalam respons mereka.

Dari Mana llms.txt Berasal?

Konsep ini diusulkan oleh Jeremy Howard — salah satu nama besar di dunia machine learning — pada akhir 2024. Idenya sederhana: buat file teks di root domain (yourdomain.com/llms.txt) yang secara eksplisit memberi tahu Large Language Model tentang konten situs kamu, struktur informasinya, dan bagian mana yang relevan untuk dikonsumsi AI.

Kalau robots.txt berbicara ke crawler tradisional, llms.txt berbicara ke model bahasa. Bedanya bukan sekadar teknis — ini soal siapa audiensnya.

Format dasarnya Markdown. Berisi nama situs, deskripsi singkat, dan daftar link ke halaman atau dokumen paling penting — lengkap dengan keterangan konteks untuk masing-masing. Bukan HTML. Bukan JSON-LD. Plain text yang bisa langsung dibaca dan diproses model.

Kenapa Ini Mulai Penting untuk Domain

Pergeseran ini nyata. Makin banyak orang tidak lagi mengetik query di Google — mereka tanya ChatGPT, mereka pakai Perplexity, mereka biarkan AI merangkum jawaban. Di titik ini, pertanyaannya berubah: bukan lagi "apakah situs kamu muncul di halaman satu?" tapi "apakah AI tahu situs kamu cukup baik untuk merekomendasikannya?"

Di sinilah llms.txt masuk. Model bahasa yang merayapi web — atau yang dilatih ulang dengan data baru — bisa menggunakan file ini sebagai peta konteks. Bukan jaminan, tapi sinyal. Dan dalam dunia AI SEO, sinyal yang jelas selalu lebih baik daripada kekosongan.

Satu hal yang sering salah dipahami: banyak yang mengira AI otomatis "mengerti" situs kamu kalau kontennya bagus. Tidak sesederhana itu. Model bekerja dari data yang dilatihkan dan dari apa yang bisa mereka akses saat inferensi. Kalau struktur informasi situs kamu ambigu, tidak ada konteks yang memudahkan model untuk memetakannya.

Implikasinya untuk Domain yang Mau Kamu Beli atau Bangun

Ini yang jarang dibahas: llms.txt juga menjadi sinyal tambahan dalam menilai kualitas sebuah domain — terutama expired domain yang punya sejarah panjang.

Domain dengan histori konten yang jelas, konsisten, dan terdokumentasi rapi berpeluang lebih tinggi untuk dikenali AI secara positif. Sebaliknya, domain yang pernah gonta-ganti niche — tahun lalu jualan suplemen, dua tahun lalu situs slot, sekarang kamu mau jadikan authority blog teknologi — punya ambiguitas konteks yang dalam. AI yang merayapinya tidak akan langsung "percaya" positioning baru kamu.

Di DomainScope, salah satu yang kami telusuri adalah histori Wayback Machine — persis untuk mendeteksi inkonsistensi niche seperti ini. Domain dengan skor tinggi di DomainScope biasanya punya sejarah konten yang koheren, backlink profile yang relevan, dan anchor text yang tidak acak-acakan. Itu fondasi yang sama yang membuat llms.txt kamu efektif: kalau konteks domainnya sudah kacau dari awal, file teks satu halaman tidak akan banyak membantu.

Cara Pasang llms.txt yang Tidak Sekadar Formalitas

Banyak implementasi llms.txt yang saya lihat isinya terlalu generik — satu paragraf deskripsi dan tiga link halaman utama. Itu hampir tidak berguna.

Yang efektif: tulis deskripsi yang spesifik tentang apa yang situs kamu tawarkan, untuk siapa, dan dalam konteks apa. Sertakan link ke konten paling substantif — bukan homepage, bukan halaman "Tentang Kami". Kalau kamu punya artikel pillar yang dalam dan terdokumentasi, masukkan ke sana. Kalau ada halaman yang menjelaskan metodologi atau framework kamu, itu prioritas.

Beberapa situs besar seperti Anthropic dan Cloudflare sudah pasang llms.txt mereka. Kamu bisa lihat langsung di anthropic.com/llms.txt sebagai referensi format yang bersih dan terstruktur.

Satu versi lanjutan yang juga mulai diadopsi: llms-full.txt — berisi konten lengkap dari halaman-halaman kunci, bukan sekadar daftarnya. Untuk situs dengan konten panjang dan dalam, ini memberi model lebih banyak bahan untuk bekerja.

Bukan Tren, Tapi Persiapan

Saya tidak bilang pasang llms.txt hari ini dan besok traffic dari AI langsung melonjak. Tidak ada yang bisa janjikan itu sekarang. Tapi lanskap sedang bergerak — dan kamu tidak mau jadi yang terakhir bergerak.

Domain yang punya fondasi bersih, histori konten yang konsisten, dan sinyal konteks yang jelas — termasuk llms.txt yang ditulis dengan serius — adalah domain yang siap untuk model pencarian generasi berikutnya. Yang lain akan sibuk catch-up.

Takeaway-nya konkret: sebelum beli domain baru atau revamp yang lama, audit dulu sejarahnya. Pastikan konteks historisnya tidak bertentangan dengan positioning yang mau kamu bangun. Baru kemudian pasang llms.txt yang mencerminkan itu dengan tepat. Urutan ini yang menentukan apakah file itu jadi sinyal kuat — atau sekadar file kosong di root server kamu.

Ready to check a domain?

Analyze a domain free →