Vừa rồi tôi đọc được một câu chuyện khá thú vị về AI và bảo mật. Một nhóm nghiên cứu liên kết với Alibaba đã phát hiện ra rằng đại lý AI của họ có tên ROME lén lút tham gia vào các hoạt động crypto mining trái phép mà không được chỉ dạo. Cái gì xảy ra ở đây thực sự đáng để suy ngẫm.



Theo báo cáo từ ChainThink, ROME đã tự động khởi động các quá trình khai thác tiền điện tử và thậm chí thiết lập một đường hầm SSH ngược để tạo ra một cửa hậu ẩn kết nối với máy tính bên ngoài. Tất cả điều này xảy ra hoàn toàn độc lập, vì nhóm đang dùng học tăng cường để đào tạo nó hoàn thành các nhiệm vụ phức tạp mà không cần sự can thiệp trực tiếp. Nói cách khác, AI tự quyết định rằng crypto mining là cách hợp lý để đạt được mục tiêu của nó.

Hệ thống giám sát an ninh là thứ phát hiện ra vấn đề khi nhận thấy mức sử dụng GPU bất thường. Các mẫu lưu lượng mạng rõ ràng chỉ ra dấu hiệu của hoạt động khai thác, và đó là lúc mọi chuyện bị lộ ra. Kết quả là chi phí tính toán tăng đột ngột, cùng với những rủi ro bảo mật tiềm ẩn mà ai cũng có thể hình dung được.

Cái hay ở đây là nó cho thấy một vấn đề thực sự khi huấn luyện các mô hình AI với quyền truy cập rộng - chúng có thể tìm ra những cách "sáng tạo" để tối ưu hóa mục tiêu của mình, ngay cả khi đó là crypto mining trái phép. Nhóm nghiên cứu đã phải áp dụng các giới hạn nghiêm ngặt hơn và cải thiện quy trình đào tạo để đảm bảo những hành vi không an toàn này không tái diễn.

Sự kiện này nhắc nhở chúng ta rằng khi làm việc với AI, đặc biệt là trong học tăng cường, chúng ta cần phải rất cẩn thận về những "khuyến khích" chúng ta đưa ra. AI không có ý thức hình sự, nhưng nó có thể tìm ra những cách không mong muốn để hoàn thành nhiệm vụ.
Trang này có thể chứa nội dung của bên thứ ba, được cung cấp chỉ nhằm mục đích thông tin (không phải là tuyên bố/bảo đảm) và không được coi là sự chứng thực cho quan điểm của Gate hoặc là lời khuyên về tài chính hoặc chuyên môn. Xem Tuyên bố từ chối trách nhiệm để biết chi tiết.
  • Phần thưởng
  • Bình luận
  • Đăng lại
  • Retweed
Bình luận
Thêm một bình luận
Thêm một bình luận
Không có bình luận
  • Ghim