ზოგადიდამატებულია 7 ივლისი, 2026

Token

ტოკენი

რას ნიშნავს Token?

ტექსტის პატარა ნაწილი, მაგალითად სიტყვა, სიტყვის ნაწილი ან სიმბოლო, რომლითაც ენობრივი მოდელი ტექსტს ამუშავებს.