Bingbot là gì?

Cách xác minh Bingbot

Một số công cụ hoặc bot giả danh Bingbot để tránh bị chặn trong tệp robots.txt của bạn. Vì thế, Microsoft cung cấp công cụ Verify Bingbot để kiểm tra xem địa chỉ IP có thực sự thuộc về Bingbot hay không.

Cách kiểm tra rất đơn giản:

1. Nhập địa chỉ IP nghi ngờ từ nhật ký máy chủ vào công cụ.
2. Công cụ sẽ xác minh và thông báo kết quả.

Nếu bot không phải Bingbot thật, bạn nên chặn hoặc đưa địa chỉ IP đó vào danh sách đen để bảo vệ website của mình.

User-Agent của Bingbot

Bingbot sử dụng nhiều dạng chuỗi user-agent khác nhau để nhận diện. Dưới đây là một số ví dụ phổ biến:

• Desktop:
  Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36

• Mobile:
  Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)


Đáng chú ý, từ tháng 4/2022, Microsoft đã cập nhật chuỗi user-agent cho Bingbot để cải thiện khả năng tương thích và hiệu quả thu thập dữ liệu.

Quản lý Bingbot như thế nào?

Bạn có thể kiểm soát cách Bingbot hoạt động trên trang web của mình bằng hai phương pháp:

1. Tệp robots.txt:
   Đây là nơi bạn chỉ định các quy tắc như chặn hoặc cho phép Bingbot truy cập từng phần của website.
2. Bing Webmaster Tools:
   Công cụ này cho phép bạn điều chỉnh tốc độ thu thập dữ liệu theo giờ thông qua tính năng Crawl Control.