标签搜索引擎下的文章 - 老郭博客

登录

找到 2 篇与搜索引擎相关的结果

2023-09-13
博客终于被百度收录老郭博客虽然建立已经差不多有2个月的时间了，但访问量一直非常的稳定，每天只有1IP。毕竟现在的网站，基本都是靠搜索引擎带来流量，所以老郭也挺关注各个搜索引擎的收录情况的。对于老郭博客这样的新站来说，吸引搜索引擎的访问本来就不是一件容易的事，再加上老郭也没有刻意的去做什么SEO，所以到目前为止，老郭博客只有国外的谷歌蜘蛛和微软蜘蛛频频访问，而国内的百度、搜狗、360三大搜索引擎的蜘蛛从来就没有来过，自然也就不会有任何的收录了。对于中文网站，三大搜索引擎不收录，意味着压根就不会有人来，所以老郭就开始寻找吸引搜索引擎蜘蛛的方法了。其实最简单有效的方法莫过于买链接了，特别是去买高权重网站的链接，那收录起来肯定快。但对于老郭这样的穷人来说，每个月花上百块去买链接，显然是不值得的。经过老郭的一番研究，去百度站长平台提交网站，也是可以吸引搜索引擎蜘蛛来抓取网站的，于是老郭立马行动。过了几天，果然百度蜘蛛来老郭博客抓取网页了，虽然每天的频次很少，但至少是个成功的开始。就这样过了差不多一个星期，再到百度去搜索，老郭博客终于被百度给收录了，虽然不多才5条记录，但足以证明，到站长平台去提交网站是一个正确的途径。后面就是慢慢的写好博客了，相信假以时日，老郭博客一定会有非常好的收录情况。

网络 # 搜索引擎 # 百度 # 收录

admin 2年前
0 2 0
2023-07-20
屏蔽Ahrefs蜘蛛最近，老郭在查看博客访客的时候发现，来自54.36.148.*IP段的占了很大的比重，经过查询，这个IP段属于Ahrefs蜘蛛专用。老郭本来还挺高兴的，咱这小破博客终于有蜘蛛来爬了，而且数量还不少，看来被各大搜索引擎收录也是指日可待。但是一查Ahrefs蜘蛛，却发现了不对劲，Ahrefs蜘蛛是一个商业的蜘蛛，会对你的网站进行分析，来判断商业价值，与搜索引擎没有半毛钱关系。也就是说，Ahrefs蜘蛛不仅不会为老郭博客带来任何流量，反而会占用大量的资源。这种亏老郭是肯定不能吃的，于是决定要屏蔽掉Ahrefs蜘蛛。要想屏蔽蜘蛛，最简单和最通用的办法就是在网站根目录下robots.txt文件里进行设置，可是老郭发现老郭博客所用的wordpress程序根目录下没有这个文件，据说wordpress是在程序里用代码来管理各个搜索引擎蜘蛛的，老郭也不懂这些，所以干脆简单粗暴点，自己在根目录下创建了一个robots.txt文件，然后添加下面的代码。 User-agent: AhrefsBot Disallow: / User-agent: * Disallow: /wp-admin/ Disallow: /wp-content/ Disallow: /wp-includes/ Disallow: /*/comment-page-* Disallow: /*?replytocom=* Disallow: /category/*/page/ Disallow: /tag/*/page/ Disallow: /*/trackback Disallow: /feed Disallow: /*/feed Disallow: /comments/feed Disallow: /?s=* Disallow: /*/?s=*\ Disallow: /*?* Disallow: /attachment/ 代码一共两部分，上面一部分是禁止Ahrefs蜘蛛访问，下面一部分是禁止所有的蜘蛛访问特定的文件夹和文件，具体是干嘛的，老郭也不懂，都是网上找的。设置完成后，要过一段时间才能慢慢屏蔽掉Ahrefs蜘蛛，毕竟商业蜘蛛也不会那么快就访问到robots.txt文件。

网络 # 屏蔽 # 搜索引擎 # 蜘蛛 # Ahrefs

admin 2年前
0 2 0