Token
Model o‘qiydigan va yaratadigan matnning asosiy birligi. Tokenlar so‘zning qismlari, so‘zlar yoki belgilar bo‘lishi mumkin; hisob-kitob va narxlash shu birliklar asosida olib boriladi.
Model o‘qiydigan va yaratadigan matnning asosiy birligi. Tokenlar so‘zning qismlari, so‘zlar yoki belgilar bo‘lishi mumkin; hisob-kitob va narxlash shu birliklar asosida olib boriladi.