66b là một mô hình ngôn ngữ lớn (LLM) có quy mô 66 tỉ tham số, được thiết kế để xử lý ngôn ngữ tự nhiên với hiệu suất cao và khả năng thích ứng với nhiều ngữ cảnh. Nó được phát triển nhằm hỗ trợ nghiên cứu, phân tích dữ liệu văn bản và ứng dụng trong giáo dục, doanh nghiệp và dịch vụ tương tác người máy.
Mô hình này xuất phát từ nhu cầu khám phá các khả năng ngôn ngữ máy vượt xa giới hạn hiện tại. Các nhà phát triển tập trung vào cải thiện hiểu ngôn ngữ, độ tin cậy và khả năng tổng hợp thông tin để phục vụ người dùng một cách an toàn và có trách nhiệm. Mục tiêu chính là cung cấp một công cụ mạnh mẽ nhưng dễ sử dụng cho nhiều ngành.
Kiến trúc của 66b dựa trên các cải tiến của transformer, với tối ưu hóa bộ nhớ và tốc độ suy diễn. Nó hỗ trợ nhiều ngôn ngữ, có khả năng trả lời câu hỏi, viết văn bản, tóm tắt và tham chiếu nguồn tin. Các tính năng an toàn, kiểm duyệt và định hướng người dùng được tích hợp để giảm rủi ro sử dụng sai mục đích.
66b có thể nâng cao chất lượng xử lý ngôn ngữ tự nhiên, thúc đẩy tự động hoá trong hỗ trợ khách hàng, phân tích văn bản và giáo dục. Tuy nhiên, nó cũng đặt ra thách thức về quyền riêng tư, sự phụ thuộc vào dữ liệu lớn và việc đảm bảo chất lượng thông tin.
