如何返回由 ObjectInspector 引用的对象

Question

我正在编写一个自定义 Hive UDF，以根据属性文件中定义的值解析 Map 中的键/值对。格式为 validate(Map, String)。目的是让第一个参数是要评估的 Map，第二个参数是包含属性文件。

我遇到的问题是 GenericUDF 类似乎期望这两个值对于查询都是动态的，因为 initialize() 函数将参数转换为 ObjectInspectors，从事物的外观来看，这没有可能的选项返回他们正在检查的对象。

我希望初始化函数加载属性文件，并且评估函数返回通过/失败。这几乎不足以涵盖我尝试过的所有内容，但希望它能让知道他们在做什么的人对这个问题有一个好主意：

public ObjectInspector initialize(ObjectInspector[] arguments) throws UDFArgumentException {
  mapOI = (MapObjectInspector) arguments[0];
  StringObjectInspector stringOI = (StringObjectInspector) arguments[1];

  try {
    // Begin Debug
    System.out.println(stringOI.getPrimitiveJavaObject(((DeferredObject) arguments[1]).get()));
    // End Debug

    loadProperties(stringOI.getPrimitiveJavaObject(((DeferredObject) arguments[1]).get()));
  }
  catch (HiveException exception) {
    throw new UDFArgumentTypeException(1, "Failed to cast properties file path for evaluation by loadProperties... What did you do?");
  }

Answer 1

initialize 方法只被调用一次，因此参数只能被视为描述评估方法期望接收的输入类型的元数据。因此，您可以实际看到输入值的唯一地方是在评估方法中，该方法可能被多次调用，通常每行一次。您实际上应该只使用初始化函数来验证类型而不是实际值。也就是说，在您的情况下，检查输入是否为具有字符串类型的原始类别元素的 map 类型。实际值的验证应在评估方法中进行。