RubyGems Navigation menu

ru_token 0.1.6-x86_64-linux

RuToken is a Ruby gem that wraps the tiktoken Rust library, enabling fast and efficient tokenization for OpenAI models. It supports multiple models including o200k_base, cl100k_base, p50k_base, and r50k_base.

Gemfile:
=

インストール:
=

バージョン履歴:

  1. 0.1.23 August 03, 2025 (13.5KB)
  2. 0.1.22 August 03, 2025 (13.5KB)
  3. 0.1.21 August 01, 2025 (13.5KB)
  4. 0.1.20 August 01, 2025 x86_64-linux (24.6MB)
  5. 0.1.20 August 01, 2025 arm64-darwin (23.9MB)
  6. 0.1.6 July 30, 2025 x86_64-linux (8.22MB)
全てのバージョンを表示（全100件）

Development依存関係 (3):

bundler >= 2.0
rake ~> 13.0
rake-compiler >= 0
全ての推移的な依存関係を表示

所有者:

プッシュ者:

作者:

  • Logan Bresnahan

SHA 256チェックサム:

=
←前のバージョン 次のバージョン→

累計ダウンロード数 9,075

このバージョンのみ 80

このバージョンがリリースされたのは:

ライセンス:

GPL-3.0-or-later

必要なRubyのバージョン: >= 3.2, < 3.5.dev

必要なRubyGemsのバージョン: >= 3.0.0

リンク:

ホームページ 変更履歴 ダウンロード 差分をレビュー バッジ 購読 RSS 悪用報告 被依存関係