RubyGems Navigation menu

tokenizersの被依存関係 以下のgemの最新版はtokenizersを必要としています

informers 1.2.1

Fast transformer inference for Ruby

2,370,846 ダウンロード数

discourse_ai-tokenizers 0.4

A Ruby gem providing a consistent interface for various AI/ML tokenizers including Open...

115,726 ダウンロード数

llm_memory 0.1.15

LLM Memory is a Ruby gem designed to provide large language models (LLMs) like ChatGPT ...

21,289 ダウンロード数

clip-rb 2.0.0

OpenAI CLIP embeddings, uses ONNX models. Allows to create embeddings for images and text

5,850 ダウンロード数

transformers-rb 0.1.7

State-of-the-art transformers for Ruby

3,991 ダウンロード数

vectorsearch 0.1.2

Vector Search backed by your vector search DB of choice.

1,879 ダウンロード数

gliner 0.3.1

Basic Ruby inference wrapper for the GLiNER2 ONNX model.

1,404 ダウンロード数

token_estimator 0.1.2

TokenEstimator is a Rails gem that allows you to count tokens in Excel, CSV, PDF, TXT, ...

1,354 ダウンロード数

fastembed 1.1.0

A Ruby port of FastEmbed - fast text embeddings using ONNX Runtime

1,123 ダウンロード数

fine 0.2.0

A Ruby-native interface for fine-tuning machine learning models, starting with image cl...

421 ダウンロード数

siglip2 1.0.0

Ruby implementation of Google's SigLIP2 model for creating text and image embeddings. U...

421 ダウンロード数

prompt_guard 1.0.2

Security pipelines for LLM applications using ONNX models from Hugging Face Hub. Detect...

353 ダウンロード数

nanochat 0.1.0.pre

A minimal, hackable LLM implementation with inference capabilities. Port of Karpathy's ...

192 ダウンロード数

kiribi-ruri_v3-30m 0.0.3

Easy to use some onnx models.

164 ダウンロード数

累計ダウンロード数 1,058,228

このバージョンのみ 368

このバージョンがリリースされたのは:

ライセンス:

Apache-2.0

必要なRubyのバージョン: >= 3.2

リンク: