Bộ đếm token

Token là các đơn vị cơ bản mà các mô hình AI như GPT-4 và GPT-3.5 sử dụng để xử lý văn bản. Một token tương ứng khoảng 4 ký tự trong tiếng Anh, hoặc khoảng ¾ của một từ. Các mô hình khác nhau sử dụng các bộ mã hóa token khác nhau — ví dụ, GPT-4o sử dụng mã hóa o200k_base trong khi GPT-4 sử dụng cl100k_base. Biết số lượng token của prompt giúp bạn nằm trong giới hạn bối cảnh của mô hình và ước tính chi phí API.

1. Chọn mã hóa phù hợp với mô hình đích của bạn (ví dụ: cl100k_base cho GPT-4). 2. Nhập hoặc dán văn bản prompt vào vùng nhập liệu. 3. Số lượng token cập nhật theo thời gian thực khi bạn nhập. 4. Công cụ cũng hiển thị số ký tự, số từ và số dòng để tham khảo.