怎样在scrapy框架下用python爬取json文件

import jsonstr = str #去掉首尾的圆括号前后部分dict = json.loads(str)comments = dict#然后for一下就行了
■网友
看图片中代码,是用urllib2如果是scrapy 看下面代码。def parse(self, response): jsonresponse = json.loads(response.body_as_unicode()) item = MyItem() item = jsonresponse return item 【怎样在scrapy框架下用python爬取json文件】 怎样在scrapy框架下用python爬取json文件


■网友
用pyv8直接处理javascript脚本

■网友
callback= 对应的就是返回内容开头那个函数名字。前后截去函数名和括号就是 JSON 了。


    推荐阅读