RubyGems Navigation menu

j_r_r_token 1.1.0

JRRToken is a Ruby gem that wraps the tiktoken Rust library, enabling fast and efficient tokenization for OpenAI models. It supports multiple models including o200k_base, cl100k_base, p50k_base, p50k_edit, and r50k_base.

Gemfile:
=

installieren:
=

Versionen:

  1. 1.1.0 August 27, 2025 x86_64-linux-musl (24,6 MB)
  2. 1.1.0 August 27, 2025 x86_64-darwin (23,9 MB)
  3. 1.1.0 August 27, 2025 arm64-darwin (23,9 MB)
  4. 1.1.0 August 27, 2025 x86_64-linux (24,6 MB)
  5. 1.1.0 August 27, 2025 aarch64-linux-musl (24,3 MB)
  6. 1.1.0 August 27, 2025 (13,5 KB)
Zeige alle Versionen (31 total)

Development Abhängigkeiten (3):

bundler >= 2.0
rake ~> 13.0
rake-compiler >= 0
Alle transitiven Abhängigkeiten anzeigen

Besitzer:

Pushed by:

Autoren:

  • Logan Bresnahan

SHA 256-Prüfsumme:

=
← Previous version

Downloads insgesamt 4.706

Für diese Version 218

Version veröffentlicht:

Lizenz:

MIT

Erforderliche Ruby-Version: >= 2.7.0

Required Rubygems Version: >= 3.0.0

Links:

Homepage Changelog Download Review changes Abzeichen Abonniere RSS Missbrauch melden Reverse dependencies