如何将已创建的 json 格式字符串插入 Elasticsearch Bulk

Question

在 python 脚本中，

我正在尝试 elasticsearch.helpers.bulk 存储多条记录。

我会从另一个软件得到一个json格式的字符串，我想把它附加在源代码部分

我通过 answer 获得了 helpers.bulk 格式

我的部分代码：

def saveES(output,name):
    es = Elasticsearch([{'host':'localhost','port':9200}]) 
    output = output.split('\n')
    i=0
    datas=[]
    while i<len(output):
            data = {
                    "_index":"name",
                    "_type":"typed",
                    "_id":saveES.counter,
                    "_source":[[PROBLEM]]
            }
            i+=1
            saveES.counter+=1
            datas.append(data)

    helpers.bulk(es, datas)

我想在 [[PROBLEM]] 中附加一个 json 格式的字符串

我怎样才能把它贴进去？我已经很努力了，但是输出不正确..

如果我使用：

"_source":{
"image_name":'"'+name+'",'+output[i]
}

打印数据结果为：

{'_type': 'typed', '_id': 0, '_source': {'image_name': '"nginx","features": "os,disk,package", "emit_shortname": "f0b03efe94ec", "timestamp": "2017-08-18T17:25:46+0900", "docker_image_tag": "latest"'}, '_index': 'name'}

这个结果表明组合成一个字符串。

但我希望：

{'_type': 'typed', '_id': 0, '_source': {'image_name': 'nginx','features': 'os,disk,package', 'emit_shortname': 'f0b03efe94ec', 'timestamp': '2017-08-18T17:25:46+0900', 'docker_image_tag': 'latest'}, '_index': 'name'}

Answer 1

你的代码有很多问题。

1. 您在循环中覆盖 data 的值
2. 你不尊重任何规范（Pesp8 之类的）
3. 你是 while 而不是一个理解列表
4. 你创建了 2 个无用的变量
5. 你在你的函数中实例化你的 es

这是改进后的代码

es = Elasticsearch([{'host':'localhost','port':9200}]) # You don't have to initialise this variable every time you are calling the function but only once.


def save_es(output,es):  # Peps8 convention
    output = output.split('\n') # you don't need a while loop. A comprehension loop will avoid a lot of trouble
    data = [    # Please without s in data
       {
          "_index": "name",
          "_type": "typed",
          "_id": index,
          "_source": {
              "image_name":"name" + name}
        }
        for index, name in enumerate(output)
    ]    
    helpers.bulk(es, data)

save_es(output, es)

希望对您有所帮助。