Googlebot 网络抓取 500 （内部服务器错误）怎么办？ - 专题开发/技术/项目 / Google技术社区
为什么google在抓取我的网站的时候，会有500的错误呢？
基本上都有问题，我用了页面重新定位，不过也不该这样啊！
在ie里访问都是没有问题！
网址 详细资料 上次计算的日期
http://www.msproject.cn/Article/Freetextbox_Upload_Image.aspx 500 （内部服务器错误） [?] 2007-5-14
http://www.msproject.cn/Article/code_highlight_cs.aspx 500 （内部服务器错误） [?] 2007-5-14
http://www.msproject.cn/Article/code_highlight_jscript.aspx 500 （内部服务器错误） [?] 2007-5-14
http://www.msproject.cn/Article/codehighlight_freetextbox.aspx 500 （内部服务器错误） [?] 2007-5-14
[解决办法]
我也想知道，帮忙顶。
[解决办法]
500就是在googlebot抓取的时候，正好遭遇到你的代码出问题，aspx出现500很多是因为负载太大了。
优化一下负载，如果每次文章显示数据库读取量大，可以考虑静态化，或者加前端反向代理做缓存。
权宜之计也可以考虑在google web站长管理工具（也就是sitemaps工具,www.google.com/webmasters/sitemaps）中，找到抓取频率的选择，要求googlebot降低抓取频率。
