← 트렌딩

Tangerine Index는 ChatGPT 이후 나온 프로덕트와 사람들의 반응을 싣습니다.

tokenizers-cpp

github.com

Universal cross-platform tokenizers binding to HF and sentencepiece

오픈소스

github.com 방문외부 사이트GitHub513 스타외부 사이트

반응 (1)

비슷한 프로덕트

설명이 비슷한 순

  1. Tokensift

    an open-sourced token-efficiency linter for LLM prompts

    Hacker News6점GitHub스타 19github.comCLI오픈소스반응 2개최근 반응

  2. Steerling-8B

    a language model that can explain any token it generates

    Hacker News328점guidelabs.ai최근 반응

  3. Byte-Pair Encoding tokenizer for training LLMs on large datasets

    Byte-Pair Encoding tokenizer for training large language models on huge datasets

    Hacker News5점GitHub스타 6github.com오픈소스반응 2개최근 반응

  4. S3Tokenizer

    Reverse Engineering of Supervised Semantic Speech Tokenizer (S3Tokenizer) proposed in CosyVoice

    GitHub스타 535github.com오픈소스최근 반응

  5. magvit2-pytorch

    Implementation of MagViT2 Tokenizer in Pytorch

    GitHub스타 669github.com오픈소스최근 반응