李唐SEO博客中国著名高端SEO/SEM专家顾问，专注于Google SEO、百度SEO、黑帽SEO、站群霸屏、百万级以上流量提升。

网络上的爬虫非常多，有对网站收录有益的，比如百度蜘蛛（Baiduspider），也有不但不遵守robots规则对服务器造成压力，还不能为网站带来流量的无用爬虫，比如宜搜蜘蛛（YisouSpider）。 下面介绍怎么禁止这些无用的user agent访问网站。 进入到nginx安装目录下的conf目录，将...

Nginx中常出现类似访问 http://www.xxx.xx/w 无法打开的情况，而在目录后加上一条斜杠就可以访问，例如http://www.xxx.xx/w/ 这个问题也困扰了博主很久 其实解决方法很简单 在Nginx虚拟主机配置文件中加入如下语句 if (-d $request_filename) { rewrite ^/(.*)([^/])$ http://$...

本文中的内容收集整理自互联网，在nginx中使用rewrite模块的一些方法、参数及示例文件，供以后学习，特归纳出来供大家来参考。 正则表达式匹配，其中： * ~ 为区分大小写匹配 * ~* 为不区分大小写匹配 * !~和!~*分别为区分大小写不匹配及不区分大小写不匹配 文件及目录匹配...

1.fail2ban简介： fail2ban可以监视你的系统日志，然后匹配日志的错误信息（正则式匹配）执行相应的屏蔽动作（一般情况下是调用防火墙屏蔽），如:当有人在试探你的SSH、SMTP、FTP密码，只要达到你预设的次数，fail2ban就会调用防火墙屏蔽这个IP，而且可以发送e-mail通知系统管...

本日志内容来自互联网和平日使用经验，整理一下方便日后参考。 正则表达式匹配，其中： * ~ 为区分大小写匹配 * ~* 为不区分大小写匹配 * !~和!~*分别为区分大小写不匹配及不区分大小写不匹配 文件及目录匹配，其中： * -f和!-f用来判断是否存在文件 * -d和!-d用来判断...

日常工作中使用301重定向的情况很多：如网页目录结构变动，网页重命名、网页的扩展名改变、网站域名改变、SEO优化、等等，301重定向可以很方便的使页面实现跳转。 一、首先更改配置文件[root@slave logs]# cat ../conf/vhosts/test.com.conf               #test.com.conf 配置...