关于robots.txt文件请大家帮忙看一下 奇怪我打开、163的网站robots.txt文件怎么是空的啊?http://news.163.com/robots.txt 解决方案 » 免费领取超大流量手机卡,每月29元包185G流量+100分钟通话, 中国电信官方发货 因为robots.txt文件的编写方法和html语言是两码事,没有可视化的编辑器,明白么?另外robots.txt文件是可有可无的,当然是空也不奇怪了。 如果你不希望屏蔽搜索引擎的蜘蛛,就不需要robots.txt如果你看过服务器日志的话,应该会发现,蜘蛛爬站,一开始都是去访问robots.txt文件,如果没有屏蔽该搜索引擎,则继续爬内容robots.txt只是一个普通的文本文件,用记事本写即可 robots.txt如何用好了,可以引来流量 DOS/Windows和Uninx或类Unix系统上文本文件的换行方式不一样,Win下面是回车+换行(CRLF),Unix下只有LF.所以,这句话的意思可能是如果在Windows下编辑的话,要以Unix格式保存文本文件,但Windows自带的Notepad没有这个功能. 帮我看下这句随机sql语句怎么优化 TCPDF不支持中文,谁知道怎么处理? 关于Zend加速器 求助关于Apache配置php的问题! 请求处理数量的问题讨论 PHP随机获取标签内容 急救!怎么样使子页面的内容在改变后,父页面的内容自动刷新一次?子页面为弹出窗口 PHP中访问Excel文件的问题!~ 我用copy()函数上传文件,但是它说创建不了?? 文件读写问题 经常的做网页需要这样一个功能大家看一下有没有啊? 请问大家一个技巧性的东西
解决方案 »
免费领取超大流量手机卡,每月29元包185G流量+100分钟通话, 中国电信官方发货