← Барча атамалар

Токен нима?

Токен — тил модели матнни бўладиган кичик бўлак: сўз, сўзнинг қисми ёки белги. Моделлар матнни токенларда „ўқийди“ ва ёзади, AI хизматлари нархи ҳам кўпинча токенлар сони билан ҳисобланади. Ўзбек тилидаги матн одатда инглизчадан кўпроқ токенга бўлинади.

Фойдали саҳифалар

📰 ЯнгиликларHacker News

Боғлиқ атамалар

Катта тил модели (LLM) · Контекст ойнаси · API

Бу умумий маълумот, юридик маслаҳат эмас. Аниқ қоидаларни расмий манбадан текширинг.