• spider-request/response

    1.Request 部分代码 -其中,比较常用的参数: 2.Response 部分代码 大部分参数和上面的差不多: 3.发送POST请求 可以使...

  • 120
    Ubuntu的安装

    配置Ununtu 1.启动软件 2.点击甚至,编辑虚拟机参数 3.添加虚拟光盘 4.选择磁盘,镜像 5.选择配置好的虚拟机启动 6.安装界面,选...

  • spider-CrawlSpiders

    1.源码参考 CrawlSpider继承于Spider类,除了继承过来的属性外(name、allow_domains),还提供了新的属性和方法:...

  • scrapy-spiders探探

    1.spider Spider类定义了如何爬取某个(或某些)网站。包括了爬取的动作(例如:是否跟进链接)以及如何从网页的内容中提取结构化数据(爬...

  • 120
    scrapy-redis

    1.Scrapy 和 scrapy-redis的区别 Scrapy 是一个通用的爬虫框架,但是不支持分布式,Scrapy-redis是为了更方便...

  • Redis概述2

    1.Redis 数据类型 Redis支持五种数据类型:string(字符串),hash(哈希),list(列表),set(集合)及zset(so...

  • 120
    redis概述1

    1.redis简介 resis 是一个开源(BSD)许可的,内存中的数据结构存储系统,他可以用作数据库,缓存和消息中中间件。它支持多种类型的数据...

  • scrapy第一步

    1.scrapy概述 1.1. 官方网站:http://scrapy.org [orginzation]1.2. Scrapy是一个为了爬取网站...

  • 爬虫进阶-selenium和phantomJS

    selenium和phantomJS 目录清单 [x] . selenium和phantomjs概述 [x] . selenium常用API [...

个人介绍
只有那些敢于做梦的人,才有勇气去追逐自己的梦想