OWASP Top 10 cho ứng dụng LLM: vì sao prompt injection đứng đầu

Prompt injection trực tiếp và gián tiếp cho phép kẻ tấn công điều khiển hành vi mô hình, đặc biệt nguy hiểm khi LLM được cấp quyền gọi công cụ.

BTBan biên tậpBiên tập & Phân tích
0 lượt xem

Danh sách OWASP Top 10 for LLM Applications xếp Prompt Injection ở vị trí số một. Lỗi xảy ra khi dữ liệu không tin cậy (email, trang web, tài liệu) được đưa vào ngữ cảnh và mô hình làm theo chỉ dẫn nằm trong đó.

Biện pháp

  • Áp dụng nguyên tắc đặc quyền tối thiểu cho công cụ mà agent được gọi.
  • Yêu cầu xác nhận của con người với hành động nhạy cảm (gửi tiền, xóa dữ liệu, gửi email).
  • Tách biệt rõ dữ liệu và chỉ dẫn; kiểm thử định kỳ bằng promptfoo, garak.
  • Ghi log đầy đủ đầu vào/đầu ra để điều tra.
BT

Ban biên tập nội dung và phân tích an ninh mạng tại HueCA-CYBER.

Bài viết liên quan

Cùng chuyên mục & chủ đề

OWASP Top 10 cho ứng dụng LLM: vì sao prompt injection đứng đầu — HueCA-CYBER