Các mô hình LLM tiếng Ả Rập

Hệ sinh thái các mô hình LLM tiếng Ả Rập đang mở rộng nhanh chóng, đặt ra thách thức trong việc theo kịp các phát triển mới nhất. Bài viết này nhằm giải quyết vấn đề đó bằng cách đóng vai trò là một nguồn tài nguyên toàn diện, liên tục cập nhật các mô hình LLM tiếng Ả Rập mới, cung cấp cho người dùng thông tin cần thiết và các liên kết để chọn mô hình phù hợp nhất cho nhiệm vụ cụ thể của họ. Tài liệu sống này sẽ là nguồn tham khảo chính cho mọi nhu cầu về mô hình LLM tiếng Ả Rập của bạn.

Để một mô hình được đưa vào danh sách, một trong những điều kiện sau cần phải đúng:

Dưới đây là danh sách các mô hình tiếng Ả Rập đa năng (Thứ tự không phản ánh hiệu suất)

Dưới đây là danh sách các mô hình được huấn luyện và tối ưu hóa cho các trường hợp sử dụng sinh RAG

Dưới đây là danh sách các mô hình có khả năng đa phương thức (Thị giác, văn bản, v.v.)

Các mô hình được tối ưu hóa cho phương ngữ Levant

Các mô hình được tinh chỉnh cho Darija, tiếng Ả Rập thông tục của Ma-rốc

Các mô hình được tinh chỉnh cho tiếng Ả Rập Tunisia

Nếu bạn cho rằng một mô hình chưa được đưa vào danh sách, vui lòng để lại bình luận bên dưới. Nếu nó đáp ứng các tiêu chí cần thiết, nó sẽ được thêm vào.

Ngoài việc kiểm tra mô hình trên các trường hợp sử dụng thực tế, các điểm chuẩn (benchmark) cũng có giá trị để đánh giá các khía cạnh khác nhau về hiệu suất của mô hình.

Bài đăng sau đây chứa danh sách các điểm chuẩn AI tiếng Ả Rập: https://huggingface.co/blog/silma-ai/arabic-ai-benchmarks-and-leaderboards

Xin chào Karim, điều này rất sâu sắc và hữu ích, cảm ơn bạn! Nhưng tôi biết một số Mô hình Ngôn ngữ Thị giác tiếng Ả Rập có thể được thêm vào nếu điều này hữu ích.

Vui lòng chia sẻ các liên kết, đồng thời đảm bảo nó đáp ứng bất kỳ tiêu chí nào sau đây:

- Mô hình là mã nguồn mở - Mô hình có thể được dùng thử trực tuyến qua một liên kết - Mô hình được cung cấp dưới dạng API

Falcon không hỗ trợ tiếng Ả Rập: https://huggingface.co/tiiuae/falcon-40b/discussions/43