RubyGems Navigation menu

j_r_r_token 1.1.0-x86_64-darwin

JRRToken is a Ruby gem that wraps the tiktoken Rust library, enabling fast and efficient tokenization for OpenAI models. It supports multiple models including o200k_base, cl100k_base, p50k_base, p50k_edit, and r50k_base.

Gemfile:
=

installation:
=

Versions:

  1. 1.1.0 August 27, 2025 x86_64-linux-musl (24,6 Mo)
  2. 1.1.0 August 27, 2025 x86_64-darwin (23,9 Mo)
  3. 1.1.0 August 27, 2025 arm64-darwin (23,9 Mo)
  4. 1.1.0 August 27, 2025 x86_64-linux (24,6 Mo)
  5. 1.1.0 August 27, 2025 aarch64-linux-musl (24,3 Mo)
Voir toutes les versions (31)

Dépendances de Development (3):

bundler >= 2.0
rake ~> 13.0
rake-compiler >= 0
Show all transitive dependencies

Propriétaires:

Pushed by:

Auteurs:

  • Logan Bresnahan

Total de contrôle SHA 256:

=
← Version précédente

Total de téléchargements 4 788

Pour cette version 166

Version publiée:

License:

MIT

Version de Ruby requise: >= 2.7, < 3.5.dev

Required Rubygems Version: >= 3.0.0

Liens:

Page d'accueil Changelog Télécharger Review changes Badge Abonnement RSS Signaler un abus Reverse dependencies