跳转到主要内容

Scrapy作业运行器入口

项目描述

# scrapinghub-entrypoint-scrapy

[![版本](https://img.shields.io/pypi/v/scrapinghub-entrypoint-scrapy.svg)](https://pypi.python.org/pypi/scrapinghub-entrypoint-scrapy) [![pyversions](https://img.shields.io/pypi/pyversions/scrapinghub-entrypoint-scrapy.svg)](https://pypi.python.org/pypi/scrapinghub-entrypoint-scrapy) [![actions](https://github.com/scrapinghub/scrapinghub-entrypoint-scrapy/workflows/Tests/badge.svg)](https://github.com/scrapinghub/scrapinghub-entrypoint-scrapy/actions) [![codecov](https://codecov.io/gh/scrapinghub/scrapinghub-entrypoint-scrapy/branch/master/graph/badge.svg)](https://codecov.io/gh/scrapinghub/scrapinghub-entrypoint-scrapy))

Scrapy作业运行器入口。

该包实现了一个基础包装层,用于从环境中提取作业数据,正确解析/准备它,并使用Scrapy或自定义执行器执行作业。

## 功能

  • 从环境中解析作业数据

  • 处理作业参数和设置

  • 使用Scrapy运行作业

  • 收集统计数据

  • 高级日志记录和错误处理

  • 完全支持hubstorage

  • 支持自定义脚本

## 安装

pip install scrapinghub-entrypoint-scrapy

项目详情


下载文件

下载适用于您的平台的文件。如果您不确定选择哪个,请了解有关安装包的更多信息。

源代码分发

scrapinghub_entrypoint_scrapy-0.17.4.tar.gz (31.4 kB 查看哈希值)

上传时间 源代码

构建分发

scrapinghub_entrypoint_scrapy-0.17.4-py2.py3-none-any.whl (40.7 kB 查看哈希值)

上传时间 Python 2 Python 3

由以下组织支持