网站框架原因,网页TDK写在JS里了,不知爬虫能否抓到,求解答。
百度识别不了JS,建议不要走非主流路线。
蜘蛛模拟抓取下,看看能否识别
先抓取模拟看看能不能识别吧
JS不识别的
好像不太行也
用百度站长诊断抓取,只是抓取网页源代码的内容,抓取不了JS里的TDK,难搞了
如果是写在JSon-ld还有可能会被抓取,其他的抓取不了。
百度蜘蛛好像没有这么牛哔吧
可以明确告诉抓不了
现在蜘蛛还无法抓取JS
1、网站tdk,写在JS里,能否被抓取识别,蜘蛛模拟抓取下,看看能否识别;
2、百度站长抓取诊断,看蜘蛛爬行的内容,使用工具蜘蛛模拟抓取,看页面tdk能否被抓取;
3、js蜘蛛一般不容易识别,不建议tdk写js里面。
ps:先抓取模拟看看是否识别,及自己是否是写在js里
让更多人参与回答