Apa itu llms.txt?
llms.txt adalah usulan file markdown di root situs web yang memberi tahu model bahasa tentang situs tersebut dan mencantumkan halaman yang paling layak dibaca. llms.txt diusulkan di llmstxt.org pada 2024 sebagai ringkasan singkat dan sederhana yang bisa dibaca model atau agen dalam satu kali pengambilan, alih-alih meng-crawl dan mengurai HTML sebuah situs. Ini adalah usulan, bukan standar: tidak ada mesin yang wajib membacanya, dan menambahkannya murah.
Seperti apa bentuk file llms.txt?
File llms.txt adalah markdown dengan urutan tetap: satu H1 berisi nama situs, ringkasan blockquote opsional, catatan opsional, lalu bagian ## yang masing-masing berisi daftar tautan. Setiap tautan ditulis sebagai tautan markdown, opsional diikuti titik dua dan catatan singkat.
Bagian bernama Optional punya arti khusus dalam usulan ini: tautannya adalah yang boleh dilewati pembaca yang kekurangan konteks. Berikut contoh kecil untuk perusahaan rekaan:
# Acme
> Acme membuat software penagihan untuk agensi kecil: penawaran, faktur,
> pelacakan waktu, dan pengingat pembayaran dalam satu aplikasi.
Harga dihitung per ruang kerja. Acme tidak menyediakan penggajian.
## Produk
- [Fitur](https://acme.example/features): apa yang dilakukan aplikasi, dengan tangkapan layar
- [Harga](https://acme.example/pricing): paket dan isi masing-masing
## Dokumentasi
- [Memulai](https://acme.example/docs/start): siapkan ruang kerja dalam sepuluh menit
- [Referensi API](https://acme.example/docs/api)
## Optional
- [Blog](https://acme.example/blog): berita produk dan panduanSiapa yang membaca llms.txt saat ini?
Sebagian agen AI, asisten coding, dan alat developer mengambil llms.txt saat diarahkan ke sebuah situs, karena lebih cepat dan lebih bersih daripada membaca HTML. Banyak situs dokumentasi memublikasikannya justru untuk keperluan itu.
Answer engine besar adalah cerita lain. Tidak satu pun dari empat mesin di panel standar Proofsource yang menyatakan memakai llms.txt untuk memutuskan merek mana yang disebut atau halaman mana yang dikutip, dan Google menyatakan Anda tidak memerlukan file baru yang dapat dibaca mesin, file teks AI, atau markup untuk muncul di AI Overviews atau AI Mode (Google Search Central). Panduan Google tentang fitur AI generatifnya, diperbarui 10 Juli 2026, mengulanginya: tidak diperlukan file baru yang dapat dibaca mesin, file teks AI, markup, atau Markdown untuk muncul di Google Search (Google). Anggap file ini dokumentasi untuk agen, bukan tuas peringkat.
Yang benar-benar menggeser jawaban AI adalah halaman yang dikutip mesin. Dalam contoh Tesla yang publik (4 Okt 2026), Google AI Overviews mengutip youtube.com 20 kali dan reddit.com 15 kali, dan tesla.com sekali. Tidak ada file di situs merek sendiri yang mengubah itu; meraih tempat di halaman yang sudah dibaca mesinlah yang mengubahnya.
Apakah mesin AI mengutip llms.txt?
Hampir tidak pernah. Sampel kami dari 23 Agustus hingga 5 Oktober 2026 berisi 41.597 kutipan dalam 4.228 jawaban dari ChatGPT, Perplexity, Claude, dan Google AI Overviews, di 18 akun. Pada 8 Oktober 2026 kami mengambil /llms.txt dari 300 domain yang paling sering dikutip: 129 mengembalikan file sungguhan, 137 tidak punya file atau menyajikan halaman HTML sebagai gantinya, dan 34 memblokir kami atau error.
129 situs dengan file itu dikutip 6.343 kali. Satu dari kutipan tersebut mengarah ke file itu sendiri: sebuah llms-full.txt, dikutip oleh Perplexity pada 2 Oktober. Tidak ada jawaban yang mengutip llms.txt. Situs yang paling sering dikutip sebagian besar tidak punya file sama sekali: dari sepuluh teratas, delapan tidak punya dan dua memblokir pengecekan kami, dan dari 25 teratas, hanya tiga yang punya. Metode lengkap dan batasannya ada di tulisannya.
| Ukuran | Jumlah |
|---|---|
| Domain yang dicek | 300 |
| Mengembalikan llms.txt sungguhan | 129 |
| Tidak ada file, atau halaman HTML di jalur itu | 137 |
| Memblokir pengecekan atau error | 34 |
| Kutipan ke 129 situs yang punya file | 6.343 |
| Kutipan yang mengarah ke llms.txt atau llms-full.txt | 1 (sebuah llms-full.txt) |
Apa beda llms.txt dengan robots.txt dan sitemap.xml?
Ketiga file ini punya tugas berbeda. robots.txt menetapkan aturan untuk crawler, sitemap.xml mendaftar URL untuk di-crawl mesin pencari, dan llms.txt menggambarkan situs dengan kata-kata untuk dibaca model.
| File | Tugas | Format | Dibaca oleh |
|---|---|---|---|
| robots.txt | Mengizinkan atau melarang crawler berdasarkan user agent dan jalur | Aturan teks biasa | Crawler pencarian dan AI yang mematuhinya |
| sitemap.xml | Mendaftar setiap URL yang ingin Anda crawl, dengan tanggal | XML | Crawler mesin pencari |
| llms.txt | Menyatakan situs ini apa dan halaman mana yang paling penting | Markdown | Sebagian agen dan alat developer |
Seperti apa llms.txt yang sungguhan?
Milik kami aktif di proofsource.co/llms.txt. File itu dibuka dengan H1 dan ringkasan satu paragraf tentang apa yang dilakukan Proofsource, lalu brief singkat: untuk siapa, apa yang diukur, dan apa yang bukan, agar model tidak mengira Proofsource adalah produk lain dengan nama serupa.
Di bawah brief, setiap halaman yang bisa diindeks dikelompokkan berdasarkan maksud: fitur, solusi, panduan, dokumentasi, glosarium, dan alat gratis. Tulisan blog terbaru ada di bawah Optional, dan baris terakhir mengarah ke llms-full.txt, file pendamping berisi teks lengkap setiap halaman untuk alat yang ingin mengambil semuanya sekaligus.
Bagaimana cara menulis dan mengecek llms.txt?
Tulis secara manual atau dengan generator llms.txt gratis, yang membuat file dari formulir di browser Anda dan mengeceknya saat Anda mengetik. Simpan sebagai teks biasa di root situs Anda, agar bisa diakses di /llms.txt.
Lalu cek salinan yang aktif dengan validator llms.txt, dan pastikan crawler yang akan membacanya tidak diblokir dengan pengecek crawler AI. Beberapa aturan agar file tetap berguna:
- Batasi ringkasan menjadi satu paragraf yang menyatakan situs ini apa dan untuk siapa.
- Tautkan hanya halaman yang menjawab pertanyaan nyata: produk, harga, dokumentasi, perbandingan.
- Pakai URL https:// absolut, agar model bisa membukanya dari mana saja.
- Taruh daftar panjang seperti blog di bawah Optional, dan jaga file tetap singkat.
- Perbarui saat halaman penting pindah; tautan basi lebih buruk daripada tidak ada tautan.
Pertanyaan umum tentang llms.txt
Apakah llms.txt meningkatkan visibilitas AI?
Tidak ada bukti bahwa llms.txt meningkatkannya. Dalam sampel kutipan kami, 129 situs paling sering dikutip yang memublikasikannya dikutip 6.343 kali dan hanya satu kutipan yang mengarah ke file semacam itu, dan Google menyatakan tidak diperlukan file teks AI khusus untuk AI Overviews. Halaman yang bisa dibaca dan akses crawler yang terbuka jauh lebih penting.
Apakah llms.txt standar resmi?
Bukan. Ini adalah usulan yang dipublikasikan di llmstxt.org pada 2024. Tidak ada yang wajib membaca atau memublikasikannya, dan formatnya bisa berubah.
Apakah llms.txt menggantikan robots.txt?
Tidak. robots.txt adalah tempat akses crawler diizinkan atau diblokir, dan llms.txt tidak punya wewenang atas itu. Situs yang memblokir crawler AI di robots.txt tidak menjadi terbuka hanya karena memublikasikan llms.txt.
Apa itu llms-full.txt?
File pendamping berisi teks lengkap halaman-halaman yang ditautkan llms.txt, dalam satu file markdown, untuk alat yang ingin mengambil semuanya dalam satu kali pengambilan. Sifatnya opsional, dan entri glosariumnya sendiri menjelaskan asal-usulnya.
Istilah terkait
- llms-full.txt
llms-full.txt adalah pendamping opsional llms.txt: satu file markdown berisi teks lengkap halaman-halaman utama sebuah situs, agar model atau agen dapat membacanya dalam sekali ambil.
- robots.txt
robots.txt adalah file teks biasa di root situs web yang memberi tahu crawler jalur mana yang boleh diambil, berdasarkan Robots Exclusion Protocol (RFC 9309).
- Answer engine optimization (AEO)
Answer engine optimization (AEO) adalah upaya agar merek Anda disebut, dan halaman Anda dikutip, dalam jawaban yang diberikan asisten AI.
- Generative engine optimization (GEO)
Generative engine optimization (GEO) adalah upaya memperbaiki cara mesin AI generatif menggambarkan dan merekomendasikan merek Anda, agar Anda disebut dan dikutip dalam jawabannya.
- Google AI Overviews
Google AI Overviews adalah ringkasan tulisan AI yang ditampilkan Google di atas sebagian hasil pencarian, dengan tautan ke halaman yang menjadi sumbernya.
Contoh kasus: Tesla, jawaban AI publik, 4 Okt 2026: pemindaian pertama Proofsource untuk Tesla, 25 pertanyaan pembeli dan 5 pertanyaan merek, satu jawaban per pertanyaan di masing-masing dari empat mesin. Sampel kecil dari satu merek, ditampilkan sebagai contoh, bukan tolok ukur.
Lihat di mana AI melewatkan Anda, dan apa yang perlu diperbaiki.
Lihat pertanyaan pembeli mana yang menyebut merek Anda, siapa yang disebut sebagai gantinya, dan apa yang perlu diperbaiki. 200 jawaban. 25 Prompts/pertanyaan. Mesin AI teratas. 2 hari. Gratis. Tanpa kartu.
Google AI OverviewsGoogle AI Mode
