MistralAI-Training là gì?

Crawler của Mistral dùng để thu thập dữ liệu huấn luyện. Crawler này tuân theo robots.txt.

Token robots.txt

MistralAI-Training

Nhà vận hành

Mistral

Mục đích

Huấn luyện

Tuân theo robots.txt

●Có Nhà vận hành cho biết bot này tuân thủ robots.txt.

Có tài liệu từ nhà vận hành

Có, trên các trang của chính nhà vận hành.

Tài liệu

docs.mistral.ai

Mistral chưa công bố danh sách IP cho crawler này.

Chặn MistralAI-Training trên toàn bộ trang web

User-agent: MistralAI-Training
Disallow: /

Cho phép bot này, nhưng không cho truy cập các đường dẫn riêng tư

User-agent: MistralAI-Training
Allow: /
Disallow: /admin/

Các bot khác của Mistral

Thêm bot này vào robots.txt trong trình tạo →