Bỏ qua đến nội dung chính

Tag

#LLM Safety

Tổng hợp 4 bài Kalera News liên quan đến LLM Safety — viết tiếng Việt, có dẫn nguồn gốc.

Tất cả tag

AI · tools-ai

AI: Tăng tốc Guardrail gấp 12 lần nhờ cơ chế "Latent Reasoning"

Mô hình COLAGUARD mới giúp giải quyết bài toán đánh đổi giữa độ an toàn và tốc độ trong việc kiểm soát (guardrail) các mô hình ngôn ngữ lớn. Thay vì yêu cầu giải thích rõ ràng (explicit reasoning) gây trễ cao, COLAGUARD chuyển quy trình suy luận đa bước vào không gian tiềm ẩn (latent space) trong giai đoạn suy diễn. Kết quả cho thấy mô hình cải thiện điểm F1 rõ rệt so với Llama Guard 3, đồng thời nhanh hơn 12.9 lần và giảm 22.4 lần lượng token tiêu thụ.

Nguồn arxiv.org