Michael Dell cảnh báo các AI agent cần giới hạn nghiêm ngặt

Nguồn Beincrypto

Michael Dell đặt ra một câu hỏi cho mọi công ty ứng dụng AI: “Điều gì mà agent không bao giờ được làm, dù nhận bất kỳ lệnh nào?”

Bài viết này đề cập đến việc Nvidia vừa ra mắt một hệ thống mới tên là Open Agent Safety Platform. CEO Jensen Huang của Nvidia giới thiệu đây là một hệ sinh thái mở, giúp xây dựng một lớp bảo mật đáng tin cậy cho các hệ thống agent AI an toàn.

Vì sao Michael Dell muốn thiết lập giới hạn cứng cho các agent AI

Agent AI là các chương trình tự vận hành, tự động viết mã, mở tệp, truy cập vào hệ thống của công ty mà không cần sự kiểm tra thủ công ở từng bước.

Dell so sánh các agent này như nhân viên. Ông nói, không công ty nào để nhân sự đi khắp nơi và mở mọi cánh cửa trong doanh nghiệp. Các agent số cũng cần phải bị kiểm soát chặt chẽ tương tự.

Nvidia làm gì để ngăn chặn agent AI vượt ngoài kiểm soát

Nền tảng Open Agent Safety Platform của Nvidia hiện có hơn 100 đối tác như Anthropic, Microsoft, và CrowdStrike tham gia.

Giải pháp này bao gồm hai phần:

  • Phần mềm OpenShell thiết lập những gì agent được phép quan sát và thao tác.
  • Sentry hoạt động trên chip riêng biệt, giúp giám sát từ bên ngoài hệ thống máy tính chính.

Dell cho biết, giải pháp này có thể khóa ngay lập tức các agent vi phạm, chỉ trong vài phần nghìn giây.

Michael Dell nhấn mạnh, chỉ dựa vào các chỉ dẫn bằng văn bản là chưa đủ để kiểm soát agent. Những giới hạn này cần được xây dựng trực tiếp trong phần cứng.

Cảnh báo này cũng đến từ chính các hãng sản xuất phần cứng. Nvidia cho biết OpenShell là mã nguồn mở và có thể chạy cả trên chip của đối thủ như Arm và Intel.

Các agent AI đã vượt ranh giới an toàn

Hiện đã có bốn phòng thí nghiệm AI xác nhận rằng các mô hình của họ từng xâm nhập vào hệ thống của các công ty thực tế. Google thừa nhận Gemini đã “hack” ba doanh nghiệp trong một bài kiểm tra vào tháng 05/2024.

Tuần trước, một agent của OpenAI đã xâm nhập cổng thông tin Medicare thuộc chính phủ Úc.

Jensen Huang, CEO Nvidia còn mạnh dạn đề xuất rằng các phòng thí nghiệm AI nên đóng cửa nếu không kiểm soát được thí nghiệm của mình. Ông chia sẻ thêm về quan điểm này.

Các sự kiện agent AI vượt ranh giới an toànCác sự kiện agent AI vượt ranh giới an toàn

“Tiềm năng cực kỳ lớn của AI đối với xã hội chỉ trở thành hiện thực nếu chúng ta đảm bảo được vấn đề an toàn cho AI,” Jensen Huang phát biểu.

Phần mềm mới của Nvidia hiện đã có trên GitHub. Tuy nhiên, mỗi doanh nghiệp sẽ cần tự xác định rõ danh sách những điều mà agent không bao giờ được phép làm.

Tuyên bố miễn trừ trách nhiệm: Chỉ dành cho mục đích thông tin. Hiệu suất trong quá khứ không đảm bảo cho kết quả trong tương lai.
placeholder
Dự báo giá bạc: XAG/USD giảm như nhà bài trên cát trước lập trường diều hâu của FedGiá bạc (XAG/USD) giảm 4,3% xuống gần 61,50$ trong phiên giao dịch châu Âu vào thứ Hai. Kim loại trắng lao dốc khi lãi suất trái phiếu chính phủ Mỹ cao đã làm giảm sức hấp dẫn của nó.
Tác giả  FXStreet
11 giờ trước
Giá bạc (XAG/USD) giảm 4,3% xuống gần 61,50$ trong phiên giao dịch châu Âu vào thứ Hai. Kim loại trắng lao dốc khi lãi suất trái phiếu chính phủ Mỹ cao đã làm giảm sức hấp dẫn của nó.
placeholder
Vàng lao dốc xuống gần 4.200$ khi các tín hiệu diều hâu từ Fed và đồng đô la Mỹ mạnh hơn gây áp lực lên vàng không chịu lãi suấtGiá vàng (XAU/USD) giảm xuống quanh mức 4.215$ trong giờ giao dịch đầu ngày thứ Hai ở châu Á. Kim loại quý mất điểm khi đồng Đô la Mỹ (USD) mạnh hơn và các tín hiệu diều hâu từ các nhà hoạch định chính sách của Cục Dự trữ Liên bang Mỹ (Fed) đã làm suy giảm sức hấp dẫn của vàng thỏi
Tác giả  FXStreet
18 giờ trước
Giá vàng (XAU/USD) giảm xuống quanh mức 4.215$ trong giờ giao dịch đầu ngày thứ Hai ở châu Á. Kim loại quý mất điểm khi đồng Đô la Mỹ (USD) mạnh hơn và các tín hiệu diều hâu từ các nhà hoạch định chính sách của Cục Dự trữ Liên bang Mỹ (Fed) đã làm suy giảm sức hấp dẫn của vàng thỏi
placeholder
Dầu WTI (USOIL) Giảm 2.03% vào 25 thg 9: Thị trường có đang định giá lại không?Dầu WTI (USOIL) giảm 2.03% vào ngày 24 thg 9 lúc 22:20(UTC+0), hiện có giá $92.517, với chuỗi giảm 7 ngày là 3.63%.Điều gì đang tác động đến giá cổ phiếu giảm của Dầu WTI (USOIL) hôm nay?Đà giảm của giá
Tác giả  TradingKey
9 tháng 25 ngày Thứ Sáu
Dầu WTI (USOIL) giảm 2.03% vào ngày 24 thg 9 lúc 22:20(UTC+0), hiện có giá $92.517, với chuỗi giảm 7 ngày là 3.63%.Điều gì đang tác động đến giá cổ phiếu giảm của Dầu WTI (USOIL) hôm nay?Đà giảm của giá
placeholder
Dự báo giá bạc: XAG/USD giữ ổn định gần mức 64,00$ khi giá dầu hạ nhiệtGiá bạc (XAG/USD) nhích lên sau hai ngày giảm, giao dịch quanh mức 63,90$ mỗi ounce troy trong phiên giao dịch châu Á vào thứ Sáu. Bạc không sinh lợi đang tìm thấy hỗ trợ cơ bản khi lo ngại về lạm phát dịu bớt sau đợt thoái lui của giá dầu thô.
Tác giả  FXStreet
9 tháng 25 ngày Thứ Sáu
Giá bạc (XAG/USD) nhích lên sau hai ngày giảm, giao dịch quanh mức 63,90$ mỗi ounce troy trong phiên giao dịch châu Á vào thứ Sáu. Bạc không sinh lợi đang tìm thấy hỗ trợ cơ bản khi lo ngại về lạm phát dịu bớt sau đợt thoái lui của giá dầu thô.
placeholder
Forex hôm nay: Đồng đô la Mỹ tăng khi trọng tâm vẫn là bình luận từ quan chức ngân hàng trung ươngĐây là những thông tin cần biết vào thứ Năm, ngày 24 tháng 9:
Tác giả  FXStreet
9 tháng 24 ngày Thứ Năm
Đây là những thông tin cần biết vào thứ Năm, ngày 24 tháng 9:
goTop
quote