HEAL: Phương pháp mới giúp giảm thiểu hiện tượng 'ảo giác' trong các mô hình ngôn ngữ đa phương thức

Tóm tắt AI

Nghiên cứu giới thiệu HEAL, một kỹ thuật phân tách và hiệu chỉnh thông tin ở cấp độ đầu chú ý (attention head) để ngăn chặn ảo giác trong MLLM bằng cách can thiệp vào sự lệch lạc phân phối thông tin.