Ijson从列表中解析

Question

我有一个列表，其中每个项目都包含JSON数据，所以我尝试使用Ijson解析数据，因为数据负载将是巨大的。

​

​

这就是我想要达到的目标：

article_data=#variable which contains the list
parser = ijson.parse(article_data)
for id in ijson.items(parser, 'item'):
    if(id['article_type'] != "Monthly Briefing" and id['article_type']!="Conference"):
        data_article_id.append(id['article_id'])
        data_article_short_desc.append(id['short_desc'])
        data_article_long_desc.append(id['long_desc'])

这是我得到的错误：

AttributeError：“生成器”对象没有属性“读取”

我想把list转换成string，然后尝试在Ijson中解析，但是它失败了，给了我同样的错误。

有什么建议吗？

data_article_id=[] 
data_article_short_desc=[] 
data_article_long_desc=[] 

for index in article_data: 
    parser = ijson.parse(index)
    for id in ijson.items(parser, 'item'):
        if(id['article_type'] != "Monthly Briefing" and id['article_type']!="Conference"):
            data_article_id.append(id['article_id'])
            data_article_short_desc.append(id['short_desc'])
            data_article_long_desc.append(id['long_desc'])

既然在名单上，我也试过这个..。但这也让我犯了同样的错误。

“生成器”对象没有属性“读取”

Answer 1

我假设您有一个要解析的字节字符串json对象的列表。

ijson.items(JSON，前缀)以一个可读的字节对象作为输入。也就是说，它以打开的文件或类似文件的对象作为输入。具体来说，输入应该是字节类文件对象.

如果使用Python3，则可以使用io模块和io.BytesIO创建内存中的二进制流。

示例

假设输入为b'{"id"："ab"}'，b'{"id"："cd"}‘

list_json = [b'{"id": "ab"}', b'{"id": "cd"}']
for json in list_json:
    item = ijson.items(io.BytesIO(json), "")
    for i in item:
        print(i['id'])
Output: 
    ab
    cd