前言
前几天有粉丝在群里问了一个json文件处理的问题 。
文章插图
看上去他只需要follower和ddate这两个字段下的对应的值 。
文章插图
我们知道json是一种常见的数据传输形式,所以对于爬取数据的数据解析,json的相关操作是比较重要的,能够加快我们的数据提取效率 。
思路关于这个问题,倒不是很难,群里提出了三个方法,第一个是才哥说的pd处理或者正则表达式,第二个是小编自己提出的json处理,第三个是【成都-IT技术支持-小王】提出的jsonpath,总之方法很多,这里给出4个处理方法,希望下次粉丝们再遇到类似问题的时候,有章可循 。
实现过程1、正则表达式这个方法可以看看,通过匹配的方法进行提取,代码如下所示:
import reimport jsonfile = open('漫画.txt', 'r', encoding='utf-8')content = file.readlineddate_result1 = re.findall('"ddate":"(d+-d+-d+)"', content)ddate_result2 = re.findall('"ddate":"(.*?)"', content)follower_result1 = re.findall('"follower":(d+),"', content)print(ddate_result1)print(ddate_result2)print(follower_result1)
运行之后,可以得到结果:文章插图
关于ddate,follower获取的方法肯定还有很多其他写法,这里只是抛砖引玉,欢迎大家多多尝试 。
2、jsonpath方法一关于jsonpath的用法,之前在这篇文章中有提及,感兴趣的小伙伴也可以去看看:数据提取之JSON与JsonPATH 。
下面是【成都-IT技术支持-小王】大佬给的代码:
from jsonpath import jsonpathimport json"""follower和ddate"""with open("漫画.txt", encoding="utf-8") as file:file_json = json.loads(file.readline)follower = jsonpath(file_json, "$..follower")ddate = jsonpath(file_json, "$..ddate")print(follower)print(ddate)
代码运行之后,就会得到想要的数据,如下图所示:文章插图
这个..就和xpath里面的//一样,子孙节点,$是根节点 。
3、jsonpath方法二这个是另外一个用法了,小号【皮皮】提供的,直接上代码 。
import jsonimport jsonpath# obj = json.load(open('罗翔.json', 'r', encoding='utf-8')) # 注意,这里是文件的形式,不能直接放一个文件名的字符串file = open('漫画.txt', 'r', encoding='utf-8') # 注意,这里是文件的形式,不能直接放一个文件名的字符串obj = json.loads(file.readline)follower = jsonpath.jsonpath(obj, '$..follower') # 文件对象 jsonpath语法ddate = jsonpath.jsonpath(obj, '$..ddate') # 文件对象 jsonpath语法print(follower)print(ddate)
代码运行之后,也可以得到预期的结果 。文章插图
当然了,如果你的文件本来就是json文件,也可以直接读取,代码类似:
import jsonimport jsonpathobj = json.load(open('罗翔.json', 'r', encoding='utf-8')) # 注意,这里是文件的形式,不能直接放一个文件名的字符串# file = open('罗翔.json', 'r', encoding='utf-8') # 注意,这里是文件的形式,不能直接放一个文件名的字符串# obj = json.loads(file.readline)follower = jsonpath.jsonpath(obj, '$..follower') # 文件对象 jsonpath语法ddate = jsonpath.jsonpath(obj, '$..ddate') # 文件对象 jsonpath语法print(follower)print(ddate)
运行之后,也可以得到预期的结果:文章插图
4、jsonpath方法三这个是群里【深圳-Hua Bro】华博提供的,代码如下:
import jsonimport jsonpathwith open("罗翔.txt", 'r', encoding="UTF-8") as fr:file_json = eval(fr.read.replace('nu200b', '')) # 读取的str转为字典follower = jsonpath.jsonpath(file_json, '$..follower') # 文件对象 jsonpath语法ddate = jsonpath.jsonpath(file_json, '$..ddate') # 文件对象 jsonpath语法print(follower)print(ddate)
方法大同小异,运行之后,也可以拿到预取的目标数据,如下图所示 。文章插图
【盘点Python中4种读取json文件和提取json文件内容的方法】
推荐阅读
- 10分钟学会用Python轻松玩转Excel
- Python中级精华-临界区加锁
- MySQL中常用的15个查询子句
- 用Python直观查看贵州茅台股票交易数据
- 6个实用的 Python 自动化脚本,你学会了吗?
- 减肥茶配方,减肥茶自制配方大全
- 莳萝子在香肠中的用量,莳萝在烹调中的作用及用法
- 通常鱼在一年四季中什么时候长得最慢?
- 我应该送什么结婚礼物
- 女人喜欢男人抚摸哪里