蓝天采集小细节之采集页面为空

林哲

发表文章数:1017

专业SEO优化

  • 正规SEO优化手法
  • 承诺流量+权重提升
  • 强大的团队解决问题
  • 全心全意的服务
  • 立即咨询
    首页 » 采集规则 » 蓝天采集小细节之采集页面为空

    采集页面为空:

    蓝天采集小细节之采集页面为空

    写完规则,测试规则发现时间异常的长并且页面为空

    我之前遇到这样的情况直接放弃采集目标,没有去找失败原因

    昨天又遇到这样的情况,简单的找出了一个小原因:服务器禁海外

    我的服务器香港的,换了国内服务器测试试试看:蓝天采集小细节之采集页面为空

    这没毛病,有些防火墙通常会禁止海外爬虫来访,一来直接拒绝链接或者断开链接

    主力服务器采集不了,小服务器能采集但是网站在主力服务器上怎么办?

    我是这解决的,把设定说明白:

    A服=主力服务器 B服=国内服务器

    网站在A服,需要采集后用采集发布,如果B服采集了但是无法发布

    在B服搭建一个Typecho 把B服采集的数据发布到Typecho上 A服再采集B服上的站点

    虽然麻烦但是解决了办法,我就是这么解决弄好的

    分享到:
    赞(0)

    评论 2

    4 + 4 =
    1. #1

      怎么让 采集的标签 也能typecho 发布

      小肥皂3周前 (06-17)回复
      • 数据库发布,或者改一下发布插件

        管理员林哲3周前 (06-18)回复
    Vieu4.5主题
    专业打造轻量级个人企业风格博客主题!专注于前端开发,全站响应式布局自适应模板。
    切换注册

    登录

    忘记密码 ?

    切换登录

    注册