【发布时间】:2013-05-02 13:34:53
【问题描述】:
我很想了解在 Avro 中对一种非常特定类型的数据进行编码的最佳实践:UUID。
【问题讨论】:
我很想了解在 Avro 中对一种非常特定类型的数据进行编码的最佳实践:UUID。
【问题讨论】:
这是我的做法:
{
"name": "user_id",
"type": "string",
"logicalType": "UUID"
}
在编写 UUID 的 logicalType 时,尚未记录但仍受支持,您可以在此处检查代码并自行验证:https://github.com/apache/avro/blob/branch-1.8/lang/java/avro/src/main/java/org/apache/avro/LogicalTypes.java#L71
【讨论】:
"logicalType": "uuid"。文档的部分说UUID,但随后注释uuid。 Date 也是如此,它有一个使用 date 的示例。在LogicalTypes.java 中也是小写的。
到目前为止,我发现的唯一方法是定义自定义 UUID:
{
"namespace" : "your.namespace",
"type" : "fixed",
"name" : "UUID",
"size" : 16
}
我使用的是 Scala,所以我还在 java.util.UUID 和我的自定义 UUID 之间定义了一个隐式转换,所以使用它并没有那么麻烦。
【讨论】:
我必须创建一个自定义转换器,因为我无法让 UUID logicalType 在我的 1.8 版项目中工作。只需两步——
1) 如下创建了一个新类 -
public class UUIDCustomConverter extends CustomEncoding<UUID> {
@Override
protected void write(Object datum, Encoder out) throws IOException {
out.writeString(((UUID)datum).toString());
}
@Override
protected UUID read(Object reuse, Decoder in) throws IOException {
return UUID.fromString(in.readString());
}
}
2) 为 UUID 属性添加以下注解
//annotation for handling custom converter
@AvroEncode(using=UUIDCustomConverter.class)
protected UUID id;
【讨论】: