tokenizersの被依存関係 以下のgemの最新版はtokenizersを必要としています
informers 1.2.1
Fast transformer inference for Ruby
2,200,422 ダウンロード数
llm_memory 0.1.14
LLM Memory is a Ruby gem designed to provide large language models (LLMs) like ChatGPT ...
15,646 ダウンロード数
transformers-rb 0.1.6
State-of-the-art transformers for Ruby
1,652 ダウンロード数
vectorsearch 0.1.2
Vector Search backed by your vector search DB of choice.
1,460 ダウンロード数
clip-rb 1.1.0
OpenAI CLIP embeddings, uses ONNX models. Allows to create embeddings for images and text
1,122 ダウンロード数
token_estimator 0.1.2
TokenEstimator is a Rails gem that allows you to count tokens in Excel, CSV, PDF, TXT, ...
696 ダウンロード数