使用Python处理json字符串中的非法双引号问题

Python处理json字符串中的非法双引号

工作中数据清洗时遇到以下情况：

a = '{"地区": "湖南", "描述": "精通软件开发、"数据挖掘"和分布式"}'

由于读取出的json字符串中包含有非法双引号，在使用json.loads()处理的时候报错

json.decoder.JSONDecodeError: Expecting ',' delimiter: line 1 column 29 (char 28)

写了大半个小时的正则都无法解决

后来使用如下方法解决了，一并把json字符串中的换行符、分隔符和双引号都转义了

def deal_json_invaild(data):
    data = data.replace("\n", "\\n").replace("\r", "\\r").replace("\n\r", "\\n\\r") \
        .replace("\r\n", "\\r\\n") \
        .replace("\t", "\\t")
    data = data.replace('": "', '&&testPassword&&')\
        .replace('", "', "$$testPassword$$")\
        .replace('{"', "@@testPassword@@")\
        .replace('"}', "**testPassword**")
    print(data)

    data = data.replace('"', r'\"')\
        .replace('&&testPassword&&', '": "').replace('$$testPassword$$', '", "').replace('@@testPassword@@', '{"').replace('**testPassword**', '"}')
    print(data)
    return data

测试如下：

a = deal_json_invaild(a)
json_data = json.loads(a)

> {"地区": "湖南", "描述": "精通软件开发、\"数据挖掘\"和分布式"}

此时转使用json.loads()便不会报错了

Python json单、双引号问题

在 python3 里，一个json是一个字典，形如 {"a":15}

json转换成字符串的话

那么，如果你要将它转换成字符串，也许你用的是str({"a":15})，这样转出来的，可能是是s= "{'a':'15'}"，也就是说，里面的kv是单引号的。这个字符串，传到其他地方，再用json.loads(s)的时候会出错，json不支持单引号。

所以，假如你想把一个json结构，转成字符串，传递给远处，然后再重新解析成json结构，应该这样：

s = json.dumps({"a":15})

然后，把数据传到远端，然后再解析回来：

d = json.loads(s)

这样就不会出错了。

也支持列表，能一次性传多个结构

s = json.dumps([{"a":15}, {"b":20}])

然后，把数据传到远端，然后再解析回来：

d = json.loads(s)

总结

以上为个人经验，希望能给大家一个参考，也希望大家多多支持。