66B là mô hình AI quy mô lớn được thiết kế để hiểu và tạo văn bản tự nhiên một cách linh hoạt. Nó được huấn luyện trên tập dữ liệu đa ngôn ngữ và có khả năng trả lời câu hỏi, viết văn bản, và tham gia vào các cuộc trò chuyện với người dùng ở nhiều ngữ cảnh khác nhau.
66B dựa trên biến đổi kiến trúc Transformer, với hàng tỷ tham số và nhiều lớp attention. Nó tối ưu hóa để cân bằng giữa hiệu suất và chi phí tính toán, cho phép deploy trên máy chủ và các thiết bị edge ở một mức độ nhất định.
66B có khả năng sinh văn bản có chất lượng cao, tóm tắt thông tin, trả lời câu hỏi, dịch ngôn ngữ, và hỗ trợ viết mã. Nó có thể được tùy biến cho các domain riêng như y tế, tài chính, giáo dục và truyền thông.