目录

• 序言
• 包
• 用法
• 开发过程
  • Http函数
    • Get
    • Post
    • 错误
      • 修复由inspect.Parameter引起的错误，导致并行下载失败。:err:1
  • 文档
    • 用法
• 尾声
  • 历史
    • 版本 1.0.2
    • 版本 1.0.1
    • 版本 1.0.0
    • 版本 0.1.2
    • 版本 0.1.1
    • 版本 0.1.0

序言

从未有过如此纯粹的爬虫 nacf。

尽管我经常编写爬虫，但我不喜欢使用像scrapy这样的大型框架，而是更喜欢简单的 requests+bs4 或更通用的 requests_html。然而，这两个对于爬虫来说不方便。例如，错误重试或并行爬取等地方需要我自己编写。编写时不是很难，但编写过多可能会很繁琐。因此，我开始编写这个nacf（Nasy Crawler Framework），希望简化一些错误重试或并行编写爬虫的过程。

包

用法

见测试。

开发过程

DONE Http函数

CLOSED: <Thu Feb 28 20:51:00 2019>

DONE Get

CLOSED: <Tue Dec 25 17:36:00 2018>

DONE Post

已关闭： <2019年2月28日星期四 20:44:00>

已完成Bug

CLOSED: <Thu Feb 28 20:51:00 2019>

已完成修复由inspect.Parameter引起的错误，导致函数并行下降。 :err:1

已关闭： <2018年12月26日星期三 20:26:00>

待办事项 文档

待办事项 使用说明

尾声

历史

版本 1.0.2

• 数据： <2019年3月10日星期日>
• 变更： 更新nalude。

版本 1.0.1

• 数据： <2019年3月10日星期日>
• 变更： 更新requests-html。

版本 1.0.0

• 数据： <2019年2月28日>
• 变更： 现在，旧的HTTP方法（get 和 post）无法接受多个URL。相反，我们可以使用 gets 和 posts。
• 新增： - nacf.html
  • nacf.json
  • nacf.gets
  • nacf.posts
• 包含： - nalude

版本 0.1.2

• 数据： <2018年12月26日>
• 修复： 修复了上一个版本中的inspect.Parameter错误。

版本 0.1.1

• 数据： <2018年12月26日>
• 忽略： 由inspect.Parameter引起的错误。
• 需要帮助： 有人能帮我关于Parameter的问题吗？

版本 0.1.0

• 日期： <2018年12月23日星期日>
• 纪念版本： 第一个版本
  • 基本功能。