Trong bối cảnh các công ty công nghệ AI ngày càng hung hãn scrape dữ liệu từ website, nhà phát triển của dự án dav2d (thuộc VideoLAN) đã giới thiệu Anubis, một hệ thống Proof-of-Work (PoW) lấy cảm hứng từ Hashcash, vốn được dùng để chống spam email. Thay vì block toàn bộ bot, Anubis yêu cầu trình duyệt của người dùng thực hiện một phép tính nhỏ, gần như không đáng kể với người dùng cá nhân, nhưng sẽ khiến các scraper AI (thu thập hàng triệu trang) tốn chi phí tính toán rất lớn. Điều này giúp server không bị quá tải, đảm bảo tài nguyên luôn sẵn sàng cho người dùng thật.

Tại sao Anubis lại quan trọng?

Khi các startup AI và các ông lớn như OpenAI, Google (GOOGL), Meta (META) chạy đua huấn luyện LLM, họ cần dataset khổng lồ. Việc scrape ồ ạt khiến nhiều website nhỏ bị sập, ảnh hưởng đến trải nghiệm của người dùng thông thường. Anubis là một giải pháp trung gian: nó không chặn hoàn toàn bot, mà làm cho việc scrape trở nên đắt đỏ, giống như “thuế” đánh vào các công ty AI. Dự án cũng đang phát triển kỹ thuật fingerprinting headless browser (dựa trên cách render font chữ) để trong tương lai, những người dùng hợp lệ sẽ không cần vượt qua PoW nữa.

Đây là một bước đi quan trọng trong cuộc chiến giữa quyền riêng tư, truy cập mở và tham vọng AI của các tập đoàn. Nếu thành công, Anubis có thể trở thành chuẩn mực mới cho hàng triệu website, giúp cân bằng lợi ích giữa người dùng, chủ sở hữu nội dung và các nhà phát triển AI.