1
我已经安装了一些错误日志到我的ASP.NET MVC网站，当谷歌爬行我的网站时，我得到了很多NullReferenceException错误。为什么google bot在抓取我的网站时收到NullReferenceException？
但是当我去到生成错误的网址时，没有什么不对吗？
为什么会这样发生？为什么google bot会导致错误？
A
回答
4
需要cookies或会话或Google不支持的其他内容？你能从事件日志中获得关于错误的更多信息吗？
1
也许缺少cookie或referrer？检查对可选HTTP标头的任何依赖。
0
机器人不包含浏览器所做的大量事情。例如，您可能正在检查不存在的会话变量。
相关问题
- 1. 为什么我的ASP网站内容没有被Google抓取？
- 2. 为什么Google Bot抓取不存在的CSS文件？
- 3. 如果存在重定向，Google bot会抓取整个网站
- 4. 以类似于Google bot的方式抓取网站html和javascript
- 5. 停止Google抓取我的网站
- 6. Google Apps Script Bot每分钟重复抓取网站
- 7. 为什么我在asp.net网站启动时收到ThreadAbortException
- 8. 为什么Google抓取我的robots.txt阻止的网页？
- 9. Google何时重新抓取网站？
- 10. 为什么Applebot无法抓取我的网站？
- 11. 为什么搜索引擎不能抓取我的网站？
- 12. 为什么我得到NullReferenceException？
- 13. 为什么我不能抓取这个网站与Scrapy
- 14. 为什么在创建System.Net.Http.HttpClient（）的实例时收到NullReferenceException？
- 15. 当Google最后抓取我的网站时提供一个URL？
- 16. 为什么Nutch（v2.3）只抓取种子网址，而不抓取整个网站？
- 17. 为什么在测试null时收到此NullReferenceException错误？
- 18. Facebook抓取工具Bot崩溃站点
- 19. 谷歌无法抓取我的网站
- 20. 抓取Google网站管理员工具
- 21. 为什么InternetReadFile不能抓取网站的整个来源？
- 22. Facebook不抓取我的网站图片
- 23. 谷歌不抓取我的网站
- 24. PHP获取网站的Google排名没有抓取Google
- 25. Google网页抓取机器人会遇到什么HTTP签名？
- 26. 为什么我得到这个NullReferenceException？
- 27. 为什么我得到一个NullReferenceException
- 28. 为什么我得到这个NullReferenceException？
- 29. 为什么我在使用google maps API获取坐标时收到NULL？
- 30. 为什么Google字体无法显示在我的网站上？
感谢这实际上是我想我需要更多关注我的代码的原因，我正在检查一个cookie，显然谷歌机器人不会有...... doh！ – dswatik 2009-04-21 13:39:35