معرفی شرکت ها

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

توضیحات

scrapy的一个下载中间件，绕过cloudflare检测

ویژگی	مقدار
سیستم عامل	-
نام فایل	aroay-cloudscraper-1.5
نام	aroay-cloudscraper
نسخه کتابخانه	1.5
نگهدارنده	[]
ایمیل نگهدارنده	[]
نویسنده	hwpchn
ایمیل نویسنده	13692839895@163.com
آدرس صفحه اصلی	https://github.com/hwpchn/AroayCloudScraper.git
آدرس اینترنتی	https://pypi.org/project/aroay-cloudscraper/
مجوز	-

# AroayCloudScraper scrapy一个插件，绕过cloudflare检测，主要是封装 cloudscraper模块，并且将cloudscraper模块在scrapy中异步执行 # 使用，在setting添加 ``` DOWNLOADER_MIDDLEWARES = { 'aroay_cloudscraper.downloadermiddlewares.CloudScraperMiddleware': 543, } ``` # 需setting设置 ``` # 默认日志级别 AROAY_CLOUDSCRAPER_LOGGING_LEVEL = logging.DEBUG 默认超时 AROAY_CLOUDSCRAPER_DOWNLOAD_TIMEOUT = 30 # 默认延迟 AROAY_CLOUDSCRAPER_DELAY = 1 #必须设置，否则报错 COMPRESSION_ENABLED = False RETRY_ENABLED: True RETRY_TIMES: 3 ``` # 代理使用 ``` def start_requests(self): for page in range(1, 2): yield CloudScraperRequest(self.base_url, callback=self.parse_index, dont_filter=True, proxy={ "http": "http://username:password@ip:port", "https": "http://username:password@ip:port", },cookies={"over18":"1"},timeout=5) ```

نیازمندی

مقدار	نام
>=1.2.58	cloudscraper
>=2.0.0	scrapy

نحوه نصب

نصب پکیج whl aroay-cloudscraper-1.5:

pip install aroay-cloudscraper-1.5.whl

نصب پکیج tar.gz aroay-cloudscraper-1.5:

pip install aroay-cloudscraper-1.5.tar.gz