# Untitled

**#AI #LLM**

### Llama 3 토크나이저를 웹에서 사용해보기

- 토크나이저는 Llama 3에서의 주요 변경사항 중 하나

- 토큰 수가 32K에서 128K로 증가

🔗[https://belladoreai.github.io/llama3-tokenizer-js/example-demo/build/](https://belladoreai.github.io/llama3-tokenizer-js/example-demo/build/) 

[llama-tokenizer-js playground](https://belladoreai.github.io/llama3-tokenizer-js/example-demo/build/)

For the site tree, see the [root Markdown](https://slashpage.com/ai-newsbits.md).