本站所有内容仅限用于学习和研究目的,如有侵权请邮件与我们联系处理!
世上事本无难易,为之则易!

网站首页 蜘蛛池 蜘蛛池程序 正文

百度蜘蛛分端统计一站总成

曹操 2022-09-27 蜘蛛池程序 1848 ℃ 2 评论 10299字 50 收藏

为了便于爬虫抓取的测试,将目前好用的蜘蛛统计程序全部整合到一起,并规整到独立的文件夹中。

目前已经整合了《冥王泛目录蜘蛛统计程序V2》、《零度站群蜘蛛统计程序》、《分别统计百度PC蜘蛛和移动蜘蛛并输出txt的php代码》,并在原程序的基础上做了细微的升级,并做了一个一键开启蜘蛛统计、删除缓存的页面。

温馨提示

本程序为php爱好者打造,仅供学习调用函数组成内容。如需学习,请务必断网调试,绝对禁止传播,更不得上传至任何在线网站。

演示站

百度蜘蛛分端统计一站总成-第1张图片

蜘蛛总成路径:/auto.php

冥王测试账号:admin

冥王测试密码:admin

演示环境Linux+Nginx+php7.0

演示说明请不要用本程序从事任何违法行为!

1.演示站点非站内链接,请自行复制访问,仅作程序/源码演示,不作为其他任何用途;

2.演示站点为源程序的代码,站点内的任何内容与我站无关,所有内容均非我站观点,如有违法、不雅内容,请联系我站删除;

3.演示站点为二级域名,因此演示站或存在二级域名、二级目录无法正常打开的情况,故不能完全演示;

4.演示站点具有时效性,站长仅能保证安装时所有文件可用,如采集php文件、推送php文件等,不能保证源采集点还能使用;

5.请认真参阅演示站点,如有个别页面/文件无法打开的,大多属于源程序存的问题,购买即视为认可,不在售后范围;

6.演示站点使用robots.txt屏蔽所有搜索引擎抓取,不能视为该站群程序的使用后的实际效果;

使用说明

程序附加了文件管理,方便与用户调整删除日志。

为了防止用户不会使用,特没有删除缓存,第一次使用可以自行在根目录删除缓存,也可以访问域名/auto.php一键删除缓存。

index.php和404.php可以删除,记得自行在自己的程序中插入以下代码:

include(dirname(__FILE__).'/bot/bot.php');
include(dirname(__FILE__).'/zhizhu/zhizhu.php');
include(dirname(__FILE__).'/spidertxt/spider_baidu.php');

蜘蛛统计总成

百度蜘蛛分端统计一站总成-第2张图片

程序文件目录

百度蜘蛛分端统计一站总成-第3张图片

程序架构

<蜘蛛统计>
├404.php
├auto.php
├index.html
├index.php
├loaddir.php
├means.txt
├<bot>
│  ├bot.php
│  ├favicon.ico
│  ├index.php
│  ├lookdb.php
│  ├up.txt
│  ├<css>
│  │  ├bootstrap.min.css
│  │  ├bootstrap.min.js
│  │  ├jquery.min.js
│  │  ├sweet-alert.css
│  │  ├sweet-alert.js
│  │  ├uptop.css
│  │  ├uptop.js
│  │  └uptop_ico.png
│  ├<data>
│  │  ├bot.db
│  │  └config.php
│  ├<layui>
│  │  ├layui.all.js
│  │  ├layui.js
│  │  ├<css>
│  │  │  ├layui.css
│  │  │  ├layui.mobile.css
│  │  │  ├<modules>
│  │  │  │  ├code.css
│  │  │  │  ├<laydate>
│  │  │  │  │  ├<default>
│  │  │  │  │  │  └laydate.css
│  │  │  │  ├<layer>
│  │  │  │  │  ├<default>
│  │  │  │  │  │  ├icon.png
│  │  │  │  │  │  ├icon-ext.png
│  │  │  │  │  │  ├layer.css
│  │  │  │  │  │  ├loading-0.gif
│  │  │  │  │  │  ├loading-1.gif
│  │  │  │  │  │  └loading-2.gif
│  │  ├<font>
│  │  │  ├iconfont.eot
│  │  │  ├iconfont.svg
│  │  │  ├iconfont.ttf
│  │  │  ├iconfont.woff
│  │  │  └iconfont.woff2
│  │  ├<images>
│  │  │  ├<face>
│  │  ├<lay>
│  │  │  ├<modules>
│  │  │  │  ├carousel.js
│  │  │  │  ├code.js
│  │  │  │  ├colorpicker.js
│  │  │  │  ├element.js
│  │  │  │  ├flow.js
│  │  │  │  ├form.js
│  │  │  │  ├jquery.js
│  │  │  │  ├laydate.js
│  │  │  │  ├layedit.js
│  │  │  │  ├layer.js
│  │  │  │  ├laypage.js
│  │  │  │  ├laytpl.js
│  │  │  │  ├mobile.js
│  │  │  │  ├rate.js
│  │  │  │  ├slider.js
│  │  │  │  ├table.js
│  │  │  │  ├transfer.js
│  │  │  │  ├tree.js
│  │  │  │  ├upload.js
│  │  │  │  └util.js
├<spidertxt>
│  ├deltj.php
│  ├dir.php
│  ├spider_baidu.php
│  ├<spiderlog>
│  │  ├<20220925>
│  │  │  └Baidu-Pc-Spiderlogs.txt
│  │  ├<20220926>
│  │  │  └Baidu-Pc-Spiderlogs.txt
│  │  └<20220927>
├<zhizhu>
│  ├5000.php
│  ├deltj.php
│  ├tongji.php
│  ├tongjis.php
│  ├zhizhu.php
│  ├zong.php
│  ├<static>
│  │  ├<css>
│  │  │  └admin.css
│  │  ├<js>
│  │  │  ├1.js
│  │  │  ├highcharts.js
│  │  │  ├jquery.js
│  │  │  ├jquery3.4.1.js
│  │  │  ├lingduseo.js
│  │  │  ├system.js
│  │  │  ├WdatePicker.js
│  │  │  ├<DatePicker>
│  │  │  │  ├calendar.js
│  │  │  │  ├WdatePicker.js
│  │  │  │  ├<lang>
│  │  │  │  │  └zh-cn.js
│  │  │  │  ├<skin>
│  │  │  │  │  ├datePicker.gif
│  │  │  │  │  ├WdatePicker.css
│  │  │  │  │  ├<default>
│  │  │  │  │  │  ├datepicker.css
│  │  │  │  │  │  └img.gif
│  │  │  │  │  ├<ext>
│  │  │  │  │  │  ├datepicker.css
│  │  │  │  │  │  ├dateselect.gif
│  │  │  │  │  │  ├glass-bg.gif
│  │  │  │  │  │  ├hd-sprite.gif
│  │  │  │  │  │  ├img.gif
│  │  │  │  │  │  ├left-btn.gif
│  │  │  │  │  │  ├left-btn2.gif
│  │  │  │  │  │  ├right-btn.gif
│  │  │  │  │  │  └right-btn2.gif
│  │  │  ├<skin>
│  │  │  │  ├datePicker.gif
│  │  │  │  ├WdatePicker.css
│  │  │  │  ├<default>
│  │  │  │  │  ├datepicker.css
│  │  │  │  │  └img.gif
│  │  │  │  ├<ext>
│  │  │  │  │  ├datepicker.css
│  │  │  │  │  ├dateselect.gif
│  │  │  │  │  ├glass-bg.gif
│  │  │  │  │  ├hd-sprite.gif
│  │  │  │  │  ├img.gif
│  │  │  │  │  ├left-btn.gif
│  │  │  │  │  ├left-btn2.gif
│  │  │  │  │  ├right-btn.gif
│  │  │  │  │  └right-btn2.gif
│  ├<tongji>
│  │  ├<360Spider>
│  │  ├<Baiduspider>
│  │  │  ├20220926.log
│  │  │  └20220927.log
│  │  ├<Bytespider>
│  │  ├<Googlebot>
│  │  ├<hour>
│  │  │  ├<20220926>
│  │  │  │  ├01.log
│  │  │  │  ├02.log
│  │  │  │  ├03.log
│  │  │  │  ├04.log
│  │  │  │  ├05.log
│  │  │  │  ├06.log
│  │  │  │  ├07.log
│  │  │  │  ├08.log
│  │  │  │  └09.log
│  │  │  ├<20220927>
│  │  │  │  ├15.log
│  │  │  │  └16.log
│  │  ├<Sogou>
│  │  ├<Yisouspider>

下载链接

下载仅供技术交流、学习探讨,请勿用于非法用途!请在下载后24小时内删除!

收取费用仅为整理编辑维护本站运营相关成本(服务器租赁、CDN防护、人工客服等成本)的赞助与支持!

百度蜘蛛分端统计一站总成-第4张图片

付费内容
售价:50 积分
开通7天赞助学员或更高级的会员可免费查看该内容
您可以登录注册购买,同时也可以免登录购买:免登录购买
目录导航
  • 温馨提示
  • 演示站
  • 使用说明
  • 蜘蛛统计总成
  • 程序文件目录
  • 程序架构
  • 下载链接

  • Tags:爬虫抓取蜘蛛统计泛目录

    必看说明

    • 本站中所有被研究的素材与信息全部来源于互联网,版权争议与本站无关。
    • 本站文章或仅为文本内容原创,非程序原创。如有侵权、不妥之处,请联系站长第一时间删除。敬请谅解!
    • 本站所有内容严格遵守国家法律的条例,所有研究的算法技术均来源于搜索引擎公开默认允许用户研究使用的接口。
    • 阅读本文及获取资源前,请确保您已充分阅读并理解《访问曹操SEO网站需知:行为准则》。
    • 本站分享的任何工具、程序仅供学习参考编写架构,仅可在本地的虚拟机内断网测试,严禁联网运行或上传搭建!
    • 任何资源必须在下载后24个小时内,从电脑中彻底删除。不得传播或者用于其他任何用途!否则一切后果用户自负!
    • 转载请注明 : 文章转载自  站群程序 百度蜘蛛分端统计一站总成
    • 本文标题:《百度蜘蛛分端统计一站总成》
    • 本文链接:http://www.zqcx.cn/1789.html

    已有2位网友发表了看法:

    • 自由侠

      自由侠  评论于 [2023-01-22 01:00:57]  回复

      百度蜘蛛统计谢谢了

    • 收录大王

      收录大王  评论于 [2022-09-27 18:54:17]  回复

      感谢老大分享!辛苦了!

    欢迎 发表评论:

    网站分类
    近期评论
    文章归档
    标签列表
    站点信息
    • 文章总数:2025
    • 页面总数:7
    • 分类总数:46
    • 标签总数:339
    • 评论总数:9366
    • 浏览总数:5898972