llms.txt là gì? Mở đường cho AI crawler trên website của bạn

Nên bắt đầu thiết lập llms.txt từ đâu?

Hãy bắt đầu với các phần công khai quan trọng của trang web, sau đó xem xét các tệp hướng dẫn truy cập và điều hướng. Chúng tôi sử dụng chuỗi 5 bước này để giữ cho công việc rõ ràng ngay từ cuộc trao đổi đầu tiên.

1. Chia sẻ thông tin chi tiết về site. Gửi URL công khai, vị trí tệp đã biết và tên của người liên hệ kỹ thuật của bạn.
2. Chọn nội dung cần đại diện. Chỉ cho chúng tôi các phần mô tả rõ nhất về tổ chức của bạn và ghi chú bất kỳ điều gì cần bỏ qua.
3. Xem xét các tệp hiện tại. Chúng tôi kiểm tra llms.txt, quy tắc robots dành cho AI user agent và sitemap cùng nhau.
4. Thống nhất các thay đổi. Chúng tôi xác nhận các chỉnh sửa nội dung và kỹ thuật đã đề xuất với người có thể phê duyệt chúng.
5. Hoàn tất thiết lập. Chúng tôi thực hiện các thay đổi đã thống nhất và cung cấp báo cáo cuối cùng về những gì đã thay đổi và lý do.

Bạn không cần phải đến với một tệp hoàn chỉnh hoặc một kế hoạch kỹ thuật. Một mô tả ngắn gọn về tổ chức của bạn giúp chúng tôi hiểu những trang công khai nào quan trọng. Nếu bạn đang cân nhắc điều này so với một kế hoạch khả năng hiển thị AI search rộng hơn, hãy cho chúng tôi biết. Chúng tôi có thể giữ cho thiết lập này tập trung vào các tệp site của bạn.

Chọn các trang kể câu chuyện của bạn

Một tệp llms.txt hữu ích bắt đầu bằng việc lựa chọn kỹ lưỡng tài liệu công khai của trang web. Chúng tôi hỏi tổ chức của bạn muốn đại diện điều gì, sau đó kiểm tra lựa chọn đó với cấu trúc của trang web.

Hãy hình dung một nhóm quan hệ đối tác nhỏ đang quyết định nên bắt đầu với kênh nào. Trang web công khai của họ có thông tin sản phẩm, chi tiết quan hệ đối tác và các trang tin tức. Chúng tôi sẽ giúp nhóm xác định phần nào giải thích rõ nhất về tổ chức, sau đó xác nhận lựa chọn đó trước khi thực hiện thay đổi. Mục tiêu là một hướng dẫn rõ ràng, phù hợp, chứ không phải một danh sách dài mọi URL.

Ví dụ, giả sử trang web của bạn có một trang đang được sửa đổi trong khi công việc này đang tiến hành. Hãy cho chúng tôi biết phiên bản nào nên đại diện cho tổ chức và ai có thể phê duyệt lựa chọn đó. Sự kiểm tra nhỏ đó giúp tệp phù hợp với câu chuyện mà nhóm của bạn định kể.

Nếu bạn vẫn đang tìm hiểu những điều cơ bản, hướng dẫn llms.txt của chúng tôi giải thích tệp này chi tiết hơn. Chúng tôi cũng có thể xem xét AEO kỹ thuật nếu câu hỏi của bạn vượt ra ngoài các tệp này. Hãy mang đến các ưu tiên của bạn dưới dạng ghi chú đơn giản; bạn không cần phải viết hướng dẫn kỹ thuật.

Ba phần của thiết lập, một lần bàn giao rõ ràng

Bạn nhận được một bản xem xét và thiết lập cho ba yếu tố site được kết nối, tiếp theo là một báo cáo mà nhóm của bạn có thể giữ lại. Bảng dưới đây cho thấy mỗi phần bao gồm những gì và khi nào chúng tôi thực hiện.

Giả sử tổ chức của bạn có tài liệu công khai, trang sản phẩm và tài liệu tin tức. Đầu tiên chúng tôi sẽ thống nhất phần nào thuộc về hướng dẫn, sau đó kiểm tra các tệp liên quan cùng nhau. Bằng cách đó, tệp llms.txt, tùy chọn truy cập và sitemap được xem xét như các phần của một thiết lập. Nếu bạn cũng muốn hiểu cách tổ chức của bạn xuất hiện trong các câu trả lời AI, một audit GEO sẽ xem xét vượt ra ngoài cấu hình tệp.

Để tiếp tục theo dõi sau thiết lập, hãy xem theo dõi khả năng hiển thị trên AI.

Các tệp trang web của bạn có thể quyết định điều gì?

Nhóm của bạn có thể quyết định hướng dẫn và tùy chọn truy cập nào mà trang web công bố, nhưng không thể quyết định cách mỗi nền tảng AI xử lý chúng. llms.txt trình bày tài liệu site đã chọn, quy tắc robots truyền đạt tùy chọn truy cập tới AI user agent và sitemap giúp xác định các trang site. Đó là những vai trò riêng biệt, vì vậy một tệp không nên được coi là sự thay thế cho tệp khác.

Trong quá trình xem xét, chúng tôi kiểm tra các tệp hiện có và xác nhận các chỉnh sửa đã đề xuất với người bạn chọn. Bạn có thể xác minh rằng tệp llms.txt đã thống nhất có tồn tại. Bạn cũng có thể kiểm tra rằng các quy tắc robots phản ánh các thay đổi đã được phê duyệt và công việc sitemap phù hợp với kế hoạch đã thống nhất. Hãy giữ báo cáo cùng với hồ sơ site của bạn để bản cập nhật trang web trong tương lai có bối cảnh hữu ích.

Mỗi nền tảng AI đặt ra các chính sách biên tập và lập chỉ mục riêng, vì vậy chúng tôi không thể kiểm soát liệu nó có diễn giải hay áp dụng các tệp này hay không. Chúng tôi báo cáo các thay đổi phía site và tác dụng dự kiến của chúng, chứ không phải phản hồi từ nền tảng.

Một vài chi tiết giúp lần xem xét đầu tiên dễ dàng hơn

Chúng tôi có thể bắt đầu với một URL công khai và các ưu tiên nội dung của bạn; bạn không cần chuẩn bị một tệp hoàn chỉnh. Công việc thường mất một đến hai ngày làm việc, sau khi có thông tin liên quan và sự phê duyệt.

Các chi tiết hữu ích cần thu thập:

• URL trang web công khai của bạn và một người liên hệ kỹ thuật.
• Vị trí đã biết của llms.txt, robots.txt và sitemap của bạn.
• Các phần công khai bạn muốn đại diện, cộng với bất kỳ điều gì cần bỏ qua.
• Tên của người có thể xem xét các thay đổi đã đề xuất.

Nếu bạn không chắc liệu thiết lập tệp có phải là bước đi đúng đắn tiếp theo hay không, hãy cho chúng tôi biết điều gì đã thúc đẩy câu hỏi. Chúng tôi có thể giúp phân biệt công việc kỹ thuật này với nhu cầu khả năng hiển thị rộng hơn, bao gồm nội dung cho câu trả lời AI. Tại Brand Community, chúng tôi cùng nhau kiểm tra các tệp hiện có và yêu cầu chủ sở hữu nội dung bạn chọn phê duyệt lựa chọn đã đề xuất trước khi triển khai.

Hãy gửi cho chúng tôi URL site, bất kỳ vị trí tệp nào đã biết và một danh sách ngắn các phần ưu tiên. Chúng tôi sẽ xác nhận đầu vào cần thiết, bắt đầu xem xét và trả lại thiết lập đã thống nhất kèm báo cáo cuối cùng.

Cách hoạt động

1. Chia sẻ thông tin chi tiết về siteGửi URL trang web công khai, vị trí tệp đã biết và người liên hệ có thể xem xét các thay đổi đã đề xuất.
2. Đặt ưu tiên nội dungNêu tên các phần site cần đại diện và bất kỳ khu vực nào bạn muốn bỏ qua khỏi hướng dẫn llms.txt được đề xuất.
3. Xem xét các tệpChúng tôi đánh giá llms.txt, quy tắc robots cho AI user agent và sitemap cùng nhau, sau đó xác nhận các thay đổi dự kiến với bạn.
4. Thực hiện thay đổi và báo cáo lạiChúng tôi hoàn tất thiết lập đã thống nhất, thường trong vòng một đến hai ngày làm việc và cung cấp báo cáo cuối cùng.