Version 23.x 新闻公告
以下公告特定于 Version 23.x。有关按时间顺序排列的信息,请参阅新闻。
Ruby 生成器变更
此 GitHub PR将在 23.x 版本中出现,它将 Ruby 代码生成器更改为发出序列化的 proto 而不是 DSL。
它从代码生成器中删除 DSL,以预见将 DSL 分离到单独的包中。
给定一个如下所示的 .proto 文件
syntax = "proto3";
package pkg;
message TestMessage {
optional int32 i32 = 1;
optional TestMessage msg = 2;
}
之前生成的代码
# Generated by the protocol buffer compiler. DO NOT EDIT!
# source: protoc_explorer/main.proto
require 'google/protobuf'
Google::Protobuf::DescriptorPool.generated_pool.build do
add_file("test.proto", :syntax => :proto3) do
add_message "pkg.TestMessage" do
proto3_optional :i32, :int32, 1
proto3_optional :msg, :message, 2, "pkg.TestMessage"
end
end
end
module Pkg
TestMessage = ::Google::Protobuf::DescriptorPool.generated_pool.lookup("pkg.TestMessage").msgclass
end
之后生成的代码
# frozen_string_literal: true
# Generated by the protocol buffer compiler. DO NOT EDIT!
# source: test.proto
require 'google/protobuf'
descriptor_data = "\n\ntest.proto\x12\x03pkg\"S\n\x0bTestMessage\x12\x10\n\x03i32\x18\x01 \x01(\x05H\x00\x88\x01\x01\x12\"\n\x03msg\x18\x02 \x01(\x0b\x32\x10.pkg.TestMessageH\x01\x88\x01\x01\x42\x06\n\x04_i32B\x06\n\x04_msgb\x06proto3"
begin
Google::Protobuf::DescriptorPool.generated_pool.add_serialized_file(descriptor_data)
rescue TypeError => e
# <compatibility code, see below>
end
module Pkg
TestMessage = ::Google::Protobuf::DescriptorPool.generated_pool.lookup("pkg.TestMessage").msgclass
end
此更改几乎修复了之前存在的所有剩余一致性问题。这是从 DSL(有损)转移到序列化描述符(保留所有信息)的副作用。
向后兼容性
此更改应 100% 兼容 2021 年 9 月发布的 Ruby Protobuf >= 3.18.0。此外,它应与所有现有用户和部署兼容。
确实插入了一些特殊的兼容性代码来实现这种程度的向后兼容性,您应该注意。如果没有兼容性代码,则存在可能破坏向后兼容性的边缘情况。之前的代码在某种程度上是宽松的,而新代码将更加严格。
当使用完整的序列化描述符时,它包含此文件导入的所有 .proto
文件的列表(而 DSL 从未正确添加依赖项)。请参阅descriptor.proto
中的代码。
add_serialized_file
验证描述符中列出的所有依赖项是否先前已使用 add_serialized_file
添加。通常这应该没问题,因为生成的代码将包含所有依赖项的 Ruby require
语句,并且如果依赖的类型之前未在 DescriptorPool
中定义,则描述符无论如何都将加载失败。
但是,如果文件路径周围存在歧义,则可能会出现问题。例如,考虑以下场景
// foo/bar.proto
syntax = "proto2";
message Bar {}
// foo/baz.proto
syntax = "proto2";
import "bar.proto";
message Baz {
optional Bar bar = 1;
}
如果您像这样调用 protoc
,它将正常工作
$ protoc --ruby_out=. -Ifoo foo/bar.proto foo/baz.proto
$ RUBYLIB=. ruby baz_pb.rb
但是,如果您像这样调用 protoc
,并且没有任何兼容性代码,它将无法加载
$ protoc --ruby_out=. -I. -Ifoo foo/baz.proto
$ protoc --ruby_out=. -I. -Ifoo foo/bar.proto
$ RUBYLIB=foo ruby foo/baz_pb.rb
foo/baz_pb.rb:10:in `add_serialized_file': Unable to build file to DescriptorPool: Depends on file 'bar.proto', but it has not been loaded (Google::Protobuf::TypeError)
from foo/baz_pb.rb:10:in `<main>'
问题在于 bar.proto
被两个不同的规范名称引用:bar.proto
和 foo/bar.proto
。这是一个用户错误:每个导入都应始终由一致的完整路径引用。希望这种类型的用户错误很少见,但很难在不尝试的情况下知道。
如果我们检测到发生此边缘情况,则此更改中的代码会使用 warn
打印警告
$ RUBYLIB=foo ruby foo/baz_pb.rb
Warning: Protobuf detected an import path issue while loading generated file foo/baz_pb.rb
- foo/baz.proto imports bar.proto, but that import was loaded as foo/bar.proto
Each proto file must use a consistent fully-qualified name.
This will become an error in the next major version.
在这种情况下,有两种可能的修复方法。一种是始终对导入使用名称 bar.proto
(删除 -I.
)。另一种是始终对导入使用名称 foo/bar.proto
(将导入行更改为 import "foo/bar.proto"
并删除 -Ifoo
)。
我们计划在下一个主要版本中删除此兼容性代码。
放弃对 Bazel <5.3 的支持
v23 将放弃对 Bazel 4 的支持。Protobuf 将继续支持 Bazel 5 LTS,最低要求的版本为 Bazel 5.3。这符合 基础 C++ 支持策略中描述的构建支持策略,并反映在基础 C++ 支持中的版本中。
语法反射弃用
v23 将弃用使用反射检查语法版本的功能。弃用将作为构建时的警告包含在内。该功能将在未来的版本中删除。