首要说下为什么从hao123上找外链!网络上的网址千千万,搜索引擎蜘蛛抓取网络中的内容总要有个起点,这个起点就叫“种子站点”。hao123这类网站便是优质的种子站点。关于种子站点的详细含义,能够参考《走进搜索引擎》。
现在论坛外链作用不大,而且许多论坛现已不能发了,这次仅仅做一个开端测验。后续会开辟更多类型平台中的外链资源,如目录站点、b2b网站外链等,也会逐步剖析我挖掘外链资源的办法和外链建设的策略。
上海优化公司第一步,获取所有hao123引荐链接
hao123论坛引荐页面
获取本页面所有的网站,共发现212个。
如有需求,能够加我的微信或者参加我的常识星球
上海优化公司第二步,获取所有hao123引荐链接的友情链接,0层,1层
利用上一步取得的212个网站,批量查询所有网站的友情链接,并保存。
本次共取得网站数量1452个,合每个网站的外链数量是:6.8个。过程中,发现许多网站现已不能拜访,只能删去;还有大量网站是同一个域名出现多个二、三级域名。也只能经过程序删去,最终剩余1007个站点。提取根域名的办法还比较费事,感兴趣的能够看这儿python提取根域名。
第三部:检查网站SEO数据
本来第三步打算开端检测是否是DZ程序的,但后面发现许多网站的权重现已是0了,根本没有挖掘意义,就开发了工具,经过爱站的API批量查了网站的SEO数据。还好API调取的价格合理,没花多少钱。
1007个网站的百度权重分布图
如有需求,能够加我的微信或者参加我的常识星球
经过数据能够发现了几个特征:
百度权重网站数量和PC端网站数量基本共同,但百度移动权重中,权8的就有32个,份额远超PC端,看来移动端终究是流量大头,许多网站的移动端权重都不错。
360权重和百度权重距离很大。
第四步,判别所有 hao123引荐链接的友情链接站的程序是否是DZ,是否能够正常翻开等
经过上一步的挑选,挖掘到百度权重1~8的网站数量489个;进一步判别网站是否为论坛,是否能够发帖。
工具的基本思路是:
大部分论坛都是DZ程序
Dz论坛的都存在 /forum.php 页面
经过拜访域名/forum.php 是否能够拜访,能够拜访的保存。
程序剖析后发现206个DZ论坛。
如有需求,能够加我的微信或者参加我的常识星球
第五步:监测是否能够发外链
这一步程序化存在很大问题,每个论坛的模板不同,主页展示方法不同,很难程序判别。只能人工。
人工检测方法如下:
论坛活跃度,如果很久都没人发帖了,就直接放弃
选装饰、母婴相关板块,翻开多个板块内新发的帖子
发现有其网站外链就把链接保存
逐一注册测验发帖
总结:这次共查到有效DZ论坛206个, 现在查了50多个,发现其他人发外链痕迹的网站有10多个。还算不错。