Ruby 3.3.0 发布

由 naruse 发布于 2023 年 12 月 25 日

我们很高兴地宣布 Ruby 3.3.0 的发布。Ruby 3.3 新增了一个名为 Prism 的解析器，使用 Lrama 作为解析器生成器，添加了一个名为 RJIT 的纯 Ruby JIT 编译器，并进行了许多性能改进，特别是 YJIT。

Prism

• 引入了 Prism 解析器 作为默认 gem
  • Prism 是一个可移植、容错且易于维护的 Ruby 语言递归下降解析器
• Prism 已准备好投入生产并正在积极维护，您可以使用它来替代 Ripper
  • 关于如何使用 Prism，有 丰富的文档
  • Prism 既是一个将由 CRuby 内部使用的 C 库，也是一个任何需要解析 Ruby 代码的工具都可以使用的 Ruby gem
  • Prism API 中的重要方法有
    • Prism.parse(source)，它将 AST 作为解析结果对象的一部分返回
    • Prism.parse_comments(source)，它返回注释
    • Prism.parse_success?(source)，如果没有错误则返回 true
• 如果您有兴趣贡献，可以直接在 Prism 仓库 上提交拉取请求或报告问题
• 您现在可以使用 ruby --parser=prism 或 RUBYOPT="--parser=prism" 来尝试 Prism 编译器。请注意，此标志仅用于调试。

使用 Lrama 代替 Bison

• 用 Lrama LALR 解析器生成器 替换 Bison [Feature #19637]
  • 如果您感兴趣，请参阅 Ruby 解析器的未来愿景
  • Lrama 内部解析器已被 Racc 生成的 LR 解析器替换，以提高可维护性
  • 支持参数化规则 (?, *, +)，将在 Ruby parse.y 中使用

YJIT

• 相比 Ruby 3.2，性能有显著提升
  • 对 splat 和 rest 参数的支持已得到改进。
  • 为虚拟机堆栈操作分配寄存器。
  • 编译了更多带有可选参数的调用。异常处理程序也已编译。
  • 不支持的调用类型和巨集调用站点不再退出到解释器。
  • 像 Rails 的 #blank? 和 专门化的 #present? 等基本方法已内联。
  • Integer#*、Integer#!=、String#!=、String#getbyte、Kernel#block_given?、Kernel#is_a?、Kernel#instance_of? 和 Module#=== 得到了特殊优化。
  • 编译速度现在比 Ruby 3.2 略快。
  • 在 Optcarrot 上，速度现在是解释器的 3 倍以上！
• 相比 Ruby 3.2，内存使用量显著改善
  • 编译代码的元数据占用的内存大大减少。
  • 当应用程序拥有超过 40,000 个 ISEQs 时，--yjit-call-threshold 将自动从 30 提高到 120。
  • 添加了 --yjit-cold-threshold 以跳过编译冷 ISEQs。
  • 在 Arm64 上生成更紧凑的代码。
• 代码 GC 现在默认禁用
  • --yjit-exec-mem-size 被视为一个硬限制，新的代码编译将在达到该限制时停止。
  • 代码 GC 不会导致性能突然下降。与服务器使用 Pitchfork 重启时，copy-on-write 行为更好。
  • 如果您愿意，仍然可以通过 --yjit-code-gc 启用代码 GC
• 添加了 RubyVM::YJIT.enable，可以在运行时启用 YJIT
  • 您可以在不修改命令行参数或环境变量的情况下启动 YJIT。Rails 7.2 将使用此方法 默认启用 YJIT。
  • 这也可以用于在应用程序启动完成后仅启用 YJIT。如果您想使用其他 YJIT 选项同时在启动时禁用 YJIT，可以使用 --yjit-disable。
• 默认提供更多 YJIT 统计信息
  • yjit_alloc_size 和其他几个与元数据相关的统计信息现在默认可用。
  • 由 --yjit-stats 生成的 ratio_in_yjit 统计信息现在可以在发布版本中使用，无需特殊统计或开发版本即可访问大多数统计信息。
• 添加了更多性能分析功能
  • 添加了 --yjit-perf 以方便使用 Linux perf 进行性能分析。
  • --yjit-trace-exits 现在支持使用 --yjit-trace-exits-sample-rate=N 进行采样
• 更彻底的测试和多个错误修复

RJIT

• 引入了纯 Ruby JIT 编译器 RJIT，并取代了 MJIT。
  • RJIT 仅支持 Unix 平台上的 x86-64 架构。
  • 与 MJIT 不同，它在运行时不需要 C 编译器。
• RJIT 仅用于实验目的。
  • 您应该在生产环境继续使用 YJIT。
• 如果您对开发 Ruby 的 JIT 感兴趣，请查看 RubyKaigi 第三天的 k0kubun 的演示。

M:N 线程调度器

• 引入了 M:N 线程调度器。[Feature #19842]
  • M 个 Ruby 线程由 N 个原生线程（OS 线程）管理，从而降低了线程创建和管理的成本。
  • 它可能会破坏 C 扩展的兼容性，因此默认情况下，主 Ractor 上的 M:N 线程调度器是禁用的。
    • 环境变量 RUBY_MN_THREADS=1 可在主 Ractor 上启用 M:N 线程。
    • 非主 Ractor 上始终启用 M:N 线程。
  • 环境变量 RUBY_MAX_CPU=n 设置 N（原生线程的最大数量）的最大值。默认值为 8。
    • 由于每个 Ractor 每次只能运行一个 Ruby 线程，因此将使用原生线程的数量，该数量是 RUBY_MAX_CPU 中指定的数量与运行中的 Ractor 数量中的较小值。因此，单 Ractor 应用程序（大多数应用程序）将只使用 1 个原生线程。
    • 为了支持阻塞操作，可以使用超过 N 个原生线程。

性能改进

• 使用 Object Shapes 优化了 defined?(@ivar)。
• 名称解析，例如 Socket.getaddrinfo>，现在可以被中断（在可用 pthreads 的环境中）。[Feature #19965]
• 垃圾收集器性能的几项改进
  • 旧对象引用的年轻对象不再立即提升到旧代。这显著减少了主 GC 收集的频率。[Feature #19678]
  • 引入了一个新的 REMEMBERED_WB_UNPROTECTED_OBJECTS_LIMIT_RATIO 调优变量，用于控制未受保护对象的数量导致触发主 GC 收集。默认设置为 0.01 (1%)。这显著减少了主 GC 收集的频率。[Feature #19571]
  • 为许多缺少写屏障的核心类型实现了写屏障，特别是 Time、Enumerator、MatchData、Method、File::Stat、BigDecimal 和其他一些类型。这显著减少了次 GC 收集时间和主 GC 收集的频率。
  • 大多数核心类现在使用可变宽度分配，特别是 Hash、Time、Thread::Backtrace、Thread::Backtrace::Location、File::Stat、Method。这使得这些类的分配和释放更快，内存占用更少，并减少了堆碎片。
  • 垃圾收集器增加了对弱引用的支持。[Feature #19783]

自 3.2 以来的其他重要更改

IRB

IRB 收到了一些增强功能，包括但不限于

• 高级 irb:rdbg 集成，提供与 pry-byebug 相当的调试体验（文档）。
• 为 ls、show_source 和 show_cmds 命令添加了分页器支持。
• ls 和 show_source 命令提供了更准确和有用的信息。
• 使用类型分析的实验性自动补全（文档）。
• 现在可以通过新引入的类 Reline::Face 来更改完成对话框中的字体颜色和字体样式（文档）

此外，IRB 还进行了广泛的重构，并进行了数十项错误修复，以便于未来的增强。

有关更详细的更新，请参阅 《揭秘 Ruby 3.3 的 IRB 重大飞跃》。

兼容性问题

注意：不包括功能错误修复。

• 在没有普通参数的块中使用不带参数的 it 调用已被弃用。在 Ruby 3.4 中，it 将成为第一个块参数的引用。[Feature #18980]

• Regexp::new 现在最多只接受 2 个参数，而不是 3 个。这在 Ruby 3.2 中已被弃用。[Bug #18797]

已移除的环境变量

以下已弃用的方法已被移除。

• 环境变量 RUBY_GC_HEAP_INIT_SLOTS 已弃用且无效。请改用环境变量 RUBY_GC_HEAP_{0,1,2,3,4}_INIT_SLOTS。[Feature #19785]

标准库兼容性问题

ext/readline 已退役

• 我们有纯 Ruby 实现 reline>，它与 ext/readline API 兼容。未来我们将依赖 reline>。如果您需要使用 ext/readline>，可以通过 rubygems.org 安装 ext/readline>，命令为 gem install readline-ext。
• 我们不再需要安装 libreadline> 或 libedit> 等库。

标准库更新

RubyGems 和 Bundler 会在用户 require 以下 gem 但未将其添加到 Gemfile 或 gemspec 时发出警告。这是因为它们将来会成为 Ruby 的内置 gem。

如果您使用 bootsnap gem，此警告将被抑制。我们建议至少运行一次应用程序时使用 DISABLE_BOOTSNAP=1 环境变量。这是此版本的限制。

目标库是

• abbrev
• base64
• bigdecimal
• csv
• drb
• getoptlong
• mutex_m
• nkf
• observer
• racc
• resolv-replace
• rinda
• syslog

添加了以下默认 gem。

• prism 0.19.0

更新了以下默认 gem。

• RubyGems 3.5.3
• abbrev 0.1.2
• base64 0.2.0
• benchmark 0.3.0
• bigdecimal 3.1.5
• bundler 2.5.3
• cgi 0.4.1
• csv 3.2.8
• date 3.3.4
• delegate 0.3.1
• drb 2.2.0
• english 0.8.0
• erb 4.0.3
• error_highlight 0.6.0
• etc 1.4.3
• fcntl 1.1.0
• fiddle 1.1.2
• fileutils 1.7.2
• find 0.2.0
• getoptlong 0.2.1
• io-console 0.7.1
• io-nonblock 0.3.0
• io-wait 0.3.1
• ipaddr 1.2.6
• irb 1.11.0
• json 2.7.1
• logger 1.6.0
• mutex_m 0.2.0
• net-http 0.4.0
• net-protocol 0.2.2
• nkf 0.1.3
• observer 0.1.2
• open-uri 0.4.1
• open3 0.2.1
• openssl 3.2.0
• optparse 0.4.0
• ostruct 0.6.0
• pathname 0.3.0
• pp 0.5.0
• prettyprint 0.2.0
• pstore 0.1.3
• psych 5.1.2
• rdoc 6.6.2
• readline 0.0.4
• reline 0.4.1
• resolv 0.3.0
• rinda 0.2.0
• securerandom 0.3.1
• set 1.1.0
• shellwords 0.2.0
• singleton 0.2.0
• stringio 3.1.0
• strscan 3.0.7
• syntax_suggest 2.0.0
• syslog 0.1.2
• tempfile 0.2.1
• time 0.3.0
• timeout 0.4.1
• tmpdir 0.2.0
• tsort 0.2.0
• un 0.3.0
• uri 0.13.0
• weakref 0.1.3
• win32ole 1.8.10
• yaml 0.3.0
• zlib 3.1.0

以下内置 gem 已从默认 gem 升级。

• racc 1.7.3

更新了以下捆绑 gem。

• minitest 5.20.0
• rake 13.1.0
• test-unit 3.6.1
• rexml 3.2.6
• rss 0.3.0
• net-ftp 0.3.3
• net-imap 0.4.9
• net-smtp 0.4.0
• rbs 3.4.0
• typeprof 0.21.9
• debug 1.9.1

有关默认 gem 或捆绑 gem 的详细信息，请参阅 GitHub releases，如 Logger 或 changelog。

有关更多详细信息，请参阅 NEWS 或 提交日志。

有了这些更改，自 Ruby 3.2.0 以来，共 5532 个文件已更改，326851 行插入（+），185793 行删除（-）！

圣诞快乐，节日快乐，祝您使用 Ruby 3.3 编程愉快！

下载

• https://cache.ruby-lang.org/pub/ruby/3.3/ruby-3.3.0.tar.gz

  SIZE: 22065999
  SHA1: 1a7e56851bf29bda1183aca99b3b323c58e0187b
  SHA256: 96518814d9832bece92a85415a819d4893b307db5921ae1f0f751a9a89a56b7d
  SHA512: 26074009b501fc793d71a74e419f34a6033c9353433919ca74ba2d24a3de432dbb11fd92c2bc285f0e4d951a6d6c74bf5b69a2ab36200c8c26e871746d6e0fc6
  

• https://cache.ruby-lang.org/pub/ruby/3.3/ruby-3.3.0.tar.xz

  SIZE: 16345456
  SHA1: c8f68e1b0a114b90460a0b44165a3b2f540fa5b6
  SHA256: 676b65a36e637e90f982b57b059189b3276b9045034dcd186a7e9078847b975b
  SHA512: 7959c5753bfa0bfc4d6d74060869aabbe9815c1c97930659da11b917ee0803ddbbd80e869e00c48b8694b4ba48709c3b6493fd045568e36e902616c35ababf01
  

• https://cache.ruby-lang.org/pub/ruby/3.3/ruby-3.3.0.zip

  SIZE: 26935108
  SHA1: a433eef1d7f96daeaf3b4cb842d0ed2dd82e7dc1
  SHA256: 0e6563f679dd3694732eb3addf9de681c67b584602ac574376b60e7a509d2cd8
  SHA512: a94a85937a14b217c1f4b90d24185289ed4aee79239c4f3eecf8034d3fd34e65ee8d66869473857ed153067188adc9b70c0471e4ebe842c9f98ef60c34090450
  

什么是 Ruby

Ruby 最初由 Matz (Yukihiro Matsumoto) 于 1993 年开发，现在作为开源项目进行开发。它运行在多个平台上，并在世界各地广泛使用，尤其是在 Web 开发领域。