240 发简信
IP属地:上海
  • 你好,很高兴能学习到您分享的文章,我在使用过程中,发现
    channel.basic_consume(callback,
    queue='hello')
    channel.basic_qos(prefetch_count=1)
    这两条代码逻辑位置不对,在程序的运行过程中,会报错,但是调整位置后可继续运行。

    rabbitmq中文教程python版 - 工作队列

    源码:https://github.com/ltoddy/rabbitmq-tutorial 工作队列 (using the Pika Python client) 本章节教...

  • ReentrantLock newUrlLock = new ReentrantLock();

    waitNewUrl();
    signalNewUrl;

    应该是加锁等待url加入,不是很懂,大神指教啊

    webmagic中级:(四)

    在这个地方我们将对spider来进行一点源码的查看! spider 因为呢,不想其他的几个部件一样,这个部件拥有很高的利用率,因为他才是整个爬虫的内部核心管理器,他拥有这其...

  • 120
    webmagic中级:(四)

    在这个地方我们将对spider来进行一点源码的查看! spider 因为呢,不想其他的几个部件一样,这个部件拥有很高的利用率,因为他才是整个爬虫的内部核心管理器,他拥有这其...

  • 120
    webmagic中级(二)

    上一篇呢,我们说了pipeline 数据管道,这下呢,我们就来了解一下这个download,看看这些个数据呢,到底是怎么来的。 这个呢,就是我们查看源码,里面能获得到的所有...

  • 120
    webmgaic中级(一)

    在上一篇文章,我们已经简单介绍爬虫框架webmagic的一些简单情况! 如有需求,请看https://www.jianshu.com/p/7949c3260aa0 接...

  • 120
    webmagic初级

    本人从事java爬虫开发已经时间不短了,但是一直因为某种原因,一直没有写一些文章来巩固自己所学习的一些知识! 现在打算,写一写自己所知道的东西,来跟大家分享一下...

  • 120
    裁判文书网APP请求分析

    前言 && 声明 抓包(抓包教程,自行百度) 主要的三种请求已经抓包回来了,通过请求参数来看,请求2和请求3均带有reqtoken参数,且每次请求数值不相同,reqtoken...