Đề xuất llms.txt được giới thiệu vào tháng 9 năm 2024 bởi Jeremy Howard của Answer.AI. Nó đáp lại một vấn đề thực tế: các hệ thống AI làm việc với context window giới hạn và thường chật vật khi phân tích các trang HTML lộn xộn, nên một bản đồ ngắn gọn, được tuyển chọn về nội dung quan trọng của site có thể giúp chúng dùng nội dung hiệu quả hơn.
llms.txt khác robots.txt như thế nào?
Chúng giải quyết hai vấn đề trái ngược. robots.txt cho crawler biết cái gì không được truy cập; đó là một tệp hạn chế. llms.txt cho hệ thống AI biết cái gì đáng dùng và tìm ở đâu; đó là một tệp tuyển chọn. Một cái vạch ranh giới, cái kia đưa ra chỉ dẫn. Một site có thể dùng cả hai, và chúng không xung đột.
Trong tệp llms.txt có gì?
Định dạng được đề xuất là một tệp Markdown ở gốc site. Nó thường mở đầu bằng tên site hoặc dự án và một tóm tắt ngắn, rồi liệt kê những trang quan trọng nhất dưới dạng liên kết kèm mô tả ngắn, thường được nhóm thành các phần. Một phiên bản mở rộng tùy chọn, đôi khi xuất bản là llms-full.txt, gồm toàn văn các trang quan trọng để model có thể dùng mà không cần lấy thêm.
Vì là Markdown, nó đọc được cho cả người lẫn máy, và giữ tín hiệu tách khỏi phần điều hướng, quảng cáo và script vốn làm lộn xộn một trang HTML đã render.
Các hệ thống AI có thật sự dùng llms.txt không?
Tính tới năm 2026 llms.txt là một đề xuất cộng đồng, không phải một chuẩn chính thức được các công ty AI lớn áp dụng, và việc hỗ trợ không được đảm bảo. Một số công cụ và nền tảng đã bắt đầu tạo và tiêu thụ nó, nhưng không có gì bảo đảm rằng một model bất kỳ sẽ đọc nó. Nên coi nó là một bổ sung chi phí thấp, hướng tới tương lai, không phải thứ thay thế cho nền tảng nội dung crawl được và có cấu trúc tốt.
Có nên thêm llms.txt không?
- Chi phí tạo và duy trì thấp, nhất là với các site nhiều documentation.
- Không gây hại gì, vì nó nằm cạnh các tệp hiện có chứ không thay thế.
- Lợi ích còn mang tính suy đoán cho tới khi được áp dụng rộng hơn, nên không nên để nó lấn át công việc kỹ thuật và nội dung cốt lõi.
Câu hỏi thường gặp
llms.txt dùng để làm gì?+
llms.txt cung cấp cho các hệ thống AI một bản hướng dẫn được tuyển chọn, đọc được bằng máy, dưới dạng Markdown, tới nội dung quan trọng nhất của một website. Nó giúp model tìm và dùng những trang quan trọng thay vì phân tích HTML lộn xộn hay crawl mọi thứ.
llms.txt có giống robots.txt không?+
Không. robots.txt hạn chế cái gì crawler được truy cập, còn llms.txt tuyển chọn cái gì hệ thống AI nên dùng và tìm ở đâu. Một cái đặt ranh giới, cái kia đưa ra chỉ dẫn, và một site có thể dùng cả hai mà không xung đột.
Các model AI có đọc llms.txt không?+
Tính tới năm 2026 nó là một đề xuất cộng đồng, không phải chuẩn chính thức, và việc hỗ trợ không được đảm bảo. Một số công cụ tạo và tiêu thụ nó, nhưng không model lớn nào chắc chắn đọc nó, nên tốt nhất coi nó là một bổ sung chi phí thấp, hướng tới tương lai.