BPE hay Unigram-LM: Tối ưu hóa Tokenizer cho ngôn ngữ hóa học SMILES

Tóm tắt AI

Nghiên cứu so sánh BPE và Unigram-LM trong việc xử lý chuỗi SMILES, cho thấy hai thuật toán tạo ra bộ từ vựng hoàn toàn khác biệt. Kết quả này thách thức việc áp dụng mặc định các phương pháp NLP truyền thống vào lĩnh vực hóa học.