Cloudflare: 34,1% lưu lượng toàn cầu đến từ bot, tốc độ tăng của AI crawler tăng 8 lần

Theo dữ liệu thời gian thực được Cloudflare Radar thu thập vào ngày 4 tháng 6, trong tổng lượng lưu lượng HTTP toàn cầu, 34,1% đến từ bot, 65,9% từ con người; Cloudflare cho biết tốc độ tăng trưởng của lưu lượng tự động nhanh gấp khoảng 8 lần so với lưu lượng của con người. Các bot AI chiếm khoảng 22% trong toàn bộ lưu lượng bot, là nhóm lớn thứ hai, chỉ sau các bot của công cụ tìm kiếm.

Phân bổ thị phần bot AI: Meta-ExternalAgent vượt GPTBot

(Nguồn: Cloudflare Radar)

Tỷ trọng của các bot AI chính trong dữ liệu của Cloudflare:

Meta-ExternalAgent: khoảng 16,3%, đã vượt GPTBot để vươn lên vị trí số 1

ClaudeBot: khoảng 11,6%

Applebot: tăng đột biến 140% trong 1 tháng, từ khoảng 2,97% nhảy lên 7,15%; Cloudflare mô tả đây là dấu hiệu cho thấy Apple Intelligence đang gia tăng mức độ thu thập dữ liệu

GPTBot: đã bị Meta-ExternalAgent vượt qua (tỷ lệ cụ thể dao động)

Cloudflare cho biết, số liệu theo các báo cáo khác nhau có thể dao động; các dữ liệu trên nên được xem là định hướng xu hướng, không phải thứ hạng chính xác.

Thử đăng nhập và cấu trúc tổng thể của lưu lượng

Dữ liệu của Cloudflare cho thấy, trong các lần thử đăng nhập của website, 94% đến từ bot. Thiết bị di động chiếm 55,4% lưu lượng toàn cầu, máy tính để bàn chiếm 44,6%. Cloudflare giải thích rằng 34,1% lưu lượng bot không đồng nghĩa với lưu lượng độc hại, vì bao gồm nhiều loại như công cụ tìm kiếm (spider), công cụ giám sát mạng, dịch vụ tích hợp API và các bot AI. Trong các bot AI, bot huấn luyện (tức thu thập dữ liệu để huấn luyện mô hình dài hạn) chiếm hơn 51,5%, phần còn lại là bot dạng tức thời (dùng để trả lời ngay các truy vấn của người dùng).

Câu hỏi thường gặp

Lưu lượng bot 34,1% trong thống kê của Cloudflare bao gồm những loại nào?

Theo dữ liệu Cloudflare Radar, lưu lượng bot 34,1% bao gồm các nhóm như bot của công cụ tìm kiếm, bot huấn luyện AI, công cụ giám sát mạng, dịch vụ tích hợp API và phần mềm tấn công độc hại. Các bot AI chiếm khoảng 22% lưu lượng bot, là nhóm lớn thứ hai.

Việc Applebot tăng trưởng 140% trong 1 tháng cho thấy điều gì?

Dữ liệu của Cloudflare cho thấy Applebot trong 1 tháng đã tăng từ khoảng 2,97% lên 7,15%, tức mức tăng đạt 140%. Cloudflare đánh giá đây là dấu hiệu cho thấy Apple Intelligence đang gia tăng cường độ thu thập dữ liệu trang web.

Dự đoán của CEO Cloudflare Matthew Prince cho năm 2027 có phải là sự thật đã được xác nhận không?

Không. “Lưu lượng bot sẽ vượt lưu lượng con người vào năm 2027” của Matthew Prince là một dự đoán cá nhân được công khai; trong nguyên văn của Cloudflare nêu rõ “đây là dự đoán, không phải sự thật đã xảy ra”. Hiện dữ liệu được xác nhận là tỷ lệ lưu lượng bot 34,1% và tốc độ tăng trưởng của lưu lượng tự động nhanh gấp khoảng 8 lần so với lưu lượng con người.