google百度几乎能实时索引到知乎这种动态js网站的内容,是咋做到的,是知乎主动提交的
google的爬虫真的能执行javascript。。。。。百度的我不太清楚,应该不能。另外主动向搜索引擎提交内容列表是可行的,不少搜索引擎也有着这样的API。
■网友
暂且不提Google能否执行Javascript,就来谈谈。的回答虽然需要点击展开,但是内容是已经加载在页面里的,不需要执行Javascript就可以读取。另外有类似于/question/xxx/answer/xxx这样的页面,不仅是利于访问单个回答,也是利于搜索引擎抓取的。关于如何监视网站增量,不了解。
■网友
根本不需要什么黑科技,这样的网站最好爬了,所有的问题都在【根话题】下面,逐个遍历就行了。
■网友
当你使用google浏览器的时候,已经提交了
推荐阅读
- 为啥开通了百度云超级会员下载速度还是会那么慢
- 能和 Google Calender 方便双向同步的 iOS 日程管理软件有哪些最好也支持iPad
- 浏览器突然上不了百度
- 六儿品车|入门2.0T+8AT,噪音几乎为零,有了冒险家还选啥BBA?
- 怎样评价Google发布的Android P
- 怎样看待财新周刊的文章《百度灰生态》
- 百度挂了,打开不了,时间2017年2月28日晚上9点左右
- Facebook, Google, 百度等公司自制开源服务器,对IBM,HP,Dell等传统服务器生产商的冲击是啥
- 有啥搜索引擎可以替代Google(外语)
- 百度统计是否有统计页面上某个按钮被点击次数的功能