网站首页 蜘蛛池 蜘蛛池程序 正文
ccseo蜘蛛统计,不仅仅是蜘蛛统计。
本版本对比历史版本,有如下升级点:
1、首页增加自定义记录蜘蛛的功能,可自定义是否记录蜘蛛;
2、修改强引配置项存储路径,,及优化其他代码;
友情提示:本次升级是因为部分站点访问量过大,但蜘蛛抓取数据却相对较少,导致记录的蜘蛛数量仅为访客的1/10,因此失去了蜘蛛统计的实用性。为解决这一问题,我们新增了自定义记录蜘蛛类型的功能。然而,对于大部分小站点而言,访客数量超过蜘蛛数量,这很可能是由垃圾爬虫抓取或异常扫描所致。这些情况常需要引起注意,并采取反爬虫措施,以免浪费服务器资源。
程序介绍
参考市面上所有蜘蛛统计程序及宝塔付费蜘蛛统计的优点,特做出本款蜘蛛统计。
正规程序适用于一切站点,100%全开源,100%无后门,所有代码带AI注释方便二开。
程序的特点包括不限于:
蜘蛛统计部分
对访客、百度、搜狗、360、神马、谷歌、bing蜘蛛的统计,可自定义统计蜘蛛类型;
对今日蜘蛛、昨日蜘蛛、前日蜘蛛、近一小时蜘蛛的统计;
对以上数据,根据规则及分蜘蛛类型(不限制、pc、移动)的搜索及筛选;
对当天每种蜘蛛多数量,平均每小时的数量,蜘蛛间隔时间的统计,以及预测今天还回来多少蜘蛛;
对被抓取页面的top30的统计,点击链接即可跳转到蜘蛛统计的规则筛选;
在添加筛选规则后,可自定义时间段(1天、3天、一周、半个月、一个月、一个季度);
根据自定义ip段及ua对真假蜘蛛的识别判定;
根据抓取的ip,依托纯真ip数据库对ip真实位置的判定;
对被抓取页面状态码、响应时间、文件大小、来路(Referer)的记录;
根据ip反查DNS,用于人工手动二次判定真假蜘蛛;
依托chart.js对以上数据以可视化的环形图、柱形图、线形图等图例展现。
分域名统计,在对几十、数百域名进行蜘蛛统计时,可依托数据可视化图标,及可自动排序的表格,进行分域名蜘蛛数量的统计。
强引部分
备注:301、302重定向,暂且简称强引。
可自定义开启强引;
可自定义强引概率;
可指定蜘蛛进行强引;
可自定义蜘蛛强引类型(pc、移动)
可自定义强引状态码:301、302
可自定义强引规则:只有满足条件的url才会被强引,以英文逗号(,)分割,留空即可强引全部;
可自定义强引记录,并等同蜘蛛统计的展现形式;
强引出去的链接,支持标签:{年}、{月}、{日}、{时}、{分}、{秒}、{数字n}、{字母n}、{字符n}
使用方法
首先修改spider的文件夹名称,修改成你需要的任意名称即可。
在泛目录的泛文件(常见index.php、show.php、404.php)载入如下代码:
require_once('./spider/spider.php');
程序截图
由于引用的chart.js开源可视化,图标统计样式是随机的,所以左上侧的图布并不代表最终效果。
其中蜘蛛统计数据可视化颜色为蓝色,强引(301、302)统计为紫色
首页
蜘蛛预测
抓取排行
蜘蛛统计
分域名统计
蜘蛛详情
蜘蛛配置
强引配置
强引统计
程序构造
100%无后门,禁止传播本统计!
文件夹
ip文件夹:包含权重蜘蛛ip段文本、纯真IP库、调用纯真IP库的php;
log文件夹:包含蜘蛛统计日志;
log_go文件夹:包含强引蜘蛛记录日志;
JS
chart.js:开源数据可视化JS,可参考:<script src="https://cdn.jsdelivr.net/npm/chart.js"></script>
PHP
config/draw.php:强引配置项;
config/record.php:记录蜘蛛配置项;
spider.php:判断记录日志与强引
index.php:主页
header.php:页头
footer.php:页尾
log.ph:记录蜘蛛日志;
log_go.php:记录强引日志;
log_del.php:删除日志;
show.php:展示蜘蛛统计;
show_go.php:展示强引记录;
handle.php:配置ip文件夹内的权重蜘蛛txt;
option.php:强引设置页面;
function.php:通过规则构造链接,构造日志目录;
get_dns.php:通过IP反查DNS;
下载链接
下载仅供技术交流、学习探讨,请勿用于非法用途!请在下载后24小时内删除!
- 蜘蛛统计部分
- 强引部分
- 首页
- 蜘蛛预测
- 抓取排行
- 蜘蛛统计
- 分域名统计
- 蜘蛛详情
- 蜘蛛配置
- 强引配置
- 强引统计
- 文件夹
- JS
- PHP
- 上一篇: 多线程检测cookie是否可以在百家号发图文
- 下一篇: PHP开源站群程序学习使用协议
必看说明
- 本站中所有被研究的素材与信息全部来源于互联网,版权争议与本站无关。
- 本站文章或仅为文本内容原创,非程序原创。如有侵权、不妥之处,请联系站长第一时间删除。敬请谅解!
- 本站所有内容严格遵守国家法律的条例,所有研究的算法技术均来源于搜索引擎公开默认允许用户研究使用的接口。
- 阅读本文及获取资源前,请确保您已充分阅读并理解《访问曹操SEO网站需知:行为准则》。
- 本站分享的任何工具、程序仅供学习参考编写架构,仅可在本地的虚拟机内断网测试,严禁联网运行或上传搭建!
- 任何资源必须在下载后24个小时内,从电脑中彻底删除。不得传播或者用于其他任何用途!否则一切后果用户自负!
- 转载请注明 : 文章转载自 站群程序 CCSEO原创蜘蛛统计v1.3
- 本文标题:《CCSEO原创蜘蛛统计v1.3》
- 本文链接:http://www.zqcx.cn/457.html
猜你喜欢
- 2024-10-06 关于SEO的一些真诚思考
- 2024-08-18 罪恶克星:不良网站举报工具填表版
- 2024-05-01 多线程批量查询百家号文章存活情况
- 2024-04-22 通过Nginx配置增强网站安全性
- 2024-04-18 多线程批量查询链接收录情况(免代理)
- 2024-03-23 搜狐自媒体批量发布软件V2.3
- 2024-01-27 CCSEO原创蜘蛛统计v1.2
- 2024-01-26 通过伪静态实现非蜘蛛则跳转的代码
- 2023-12-15 实现IP地址屏蔽和白名单功能的php代码
- 2023-11-27 如何使用伪静态全站301实现集权和保持流量到主站
你 发表评论:
欢迎- 7955℃遵纪守法:一起举报违法网址
- 7095℃警惕“冒用身份”的电信网络诈骗
- 7077℃备案域名的买卖管控会越来越严,不要尝试!
- 4974℃6月1日是《中华人民共和国网络安全法》实施五周年
- 4512℃违规事件分类与违规信息类型说明
- 4323℃关于严格遵守网络安全法规的公告
- 6298℃百度正打击构造虚假标题等违规站点
- 8157℃「百日行动」“断卡”行动持续发力
- 16060℃懒人开源站群程序V2.4.2:影视模板V2
- 15727℃通过Nginx配置增强网站安全性
- 14652℃多线程批量查询百家号文章存活情况
- 14356℃搜狐号安全系统升级通知
- 12288℃多线程批量查询链接收录情况(免代理)
- 12075℃百家号批量发布软件V1.8.5
- 11160℃企业网站安全漏洞应对:从修复到增强全方位安全新举措
- 8317℃CCSEO原创蜘蛛统计v1.3
- 10-06关于SEO的一些真诚思考
- 08-18罪恶克星:不良网站举报工具填表版
- 05-01多线程批量查询百家号文章存活情况
- 04-22通过Nginx配置增强网站安全性
- 04-22企业网站安全漏洞应对:从修复到增强全方位安全新举措
- 04-21搜狐号安全系统升级通知
- 04-18多线程批量查询链接收录情况(免代理)
- 04-09懒人开源站群程序V2.4.2:影视模板V2
- 近期评论
- 文章归档
-
- 2024年10月 (1)
- 2024年8月 (1)
- 2024年5月 (1)
- 2024年4月 (10)
- 2024年3月 (6)
- 2024年1月 (2)
- 2023年12月 (4)
- 2023年11月 (2)
- 2023年10月 (7)
- 2023年9月 (24)
- 2023年8月 (6)
- 2023年7月 (20)
- 2023年6月 (13)
- 2023年5月 (26)
- 2023年4月 (48)
- 2023年3月 (21)
- 2023年2月 (15)
- 2023年1月 (10)
- 2022年12月 (10)
- 2022年11月 (3)
- 2022年10月 (28)
- 2022年9月 (37)
- 2022年8月 (16)
- 2022年7月 (23)
- 2022年6月 (24)
- 2022年5月 (10)
- 2022年4月 (53)
- 2022年3月 (67)
- 2022年2月 (3)
- 2022年1月 (4)
- 2021年12月 (24)
- 2021年11月 (18)
- 2021年10月 (3)
- 2021年9月 (22)
- 2021年8月 (60)
- 2021年7月 (3)
- 2021年6月 (16)
- 2021年5月 (25)
- 2021年4月 (1)
- 2021年3月 (39)
- 2021年1月 (7)
- 2020年12月 (19)
- 2020年11月 (11)
- 2020年10月 (49)
- 2020年9月 (114)
- 2020年8月 (63)
- 2020年7月 (28)
- 2020年6月 (50)
- 2020年5月 (124)
- 2020年4月 (83)
- 2020年3月 (91)
- 2020年2月 (81)
- 2020年1月 (18)
- 2019年12月 (79)
- 2019年11月 (16)
- 2019年10月 (35)
- 2019年9月 (3)
- 2017年12月 (1)
- 2017年11月 (203)
- 2017年10月 (155)
- 标签列表
- 站点信息
-
- 文章总数:2024
- 页面总数:7
- 分类总数:46
- 标签总数:339
- 评论总数:9367
- 浏览总数:5890750
已有117位网友发表了看法:
噬天狗 评论于 [2024-10-19 12:34:55] 回复
zheg这个好
kain 评论于 [2024-09-09 17:14:47] 回复
zheg这个好
阿达阿达啊 评论于 [2024-08-15 01:28:06] 回复
zheg这个好
bixin 评论于 [2024-08-11 23:56:15] 回复
牛逼牛逼
二一五 评论于 [2024-07-31 11:32:44] 回复
这个可以
mowenseo 评论于 [2024-07-26 01:02:05] 回复
牛逼 很不错
噬天狗 评论于 [2024-06-12 22:55:20] 回复
超级喜欢
zeroseo 评论于 [2024-06-06 14:37:15] 回复
看看
噬天狗 评论于 [2024-05-26 17:01:09] 回复
看看
小熊猫 评论于 [2024-05-20 13:16:57] 回复
喜欢喜欢喜欢喜欢
skkkkk 评论于 [2024-05-11 08:23:28] 回复
喜欢
zxw168 评论于 [2024-05-10 17:49:25] 回复
喜欢喜欢喜欢喜欢
博亿博 评论于 [2024-05-04 20:29:00] 回复
zheg这个好
jinsheng 评论于 [2024-04-15 14:52:04] 回复
牛逼 很不错
熊大 评论于 [2024-04-13 01:38:15] 回复
牛逼牛逼牛逼牛逼牛逼
frankmeng1982 评论于 [2024-04-12 14:21:21] 回复
喜欢喜欢喜欢喜欢
kain 评论于 [2024-04-11 21:09:12] 回复
喜欢喜欢喜欢喜欢
skkkkk 评论于 [2024-04-07 16:40:20] 回复
这个好
zeroseo 评论于 [2024-04-03 19:22:09] 回复
看看
3275185149 评论于 [2024-04-02 23:26:52] 回复
zheg这个好