معرفی شرکت ها

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

توضیحات

Use asyncio and aiohttp's concatenated web crawler framework

ویژگی	مقدار
سیستم عامل	-
نام فایل	asyncpy-1.2.0
نام	asyncpy
نسخه کتابخانه	1.2.0
نگهدارنده	['lx']
ایمیل نگهدارنده	[]
نویسنده	lx
ایمیل نویسنده	125066648@qq.com
آدرس صفحه اصلی	https://github.com/lixi5338619/asyncpy.git
آدرس اینترنتی	https://pypi.org/project/asyncpy/
مجوز	-

安装: pip install asyncpy ## Asynpy Asynpy 是一个异步请求框架，基于asyncio和aiohttp，实现便捷高效的从网络上抓取数据 "With reference to the design pattern of scrapy, an asynchronous co-processing method is adopted to simplify some operations and complete the tasks of web crawler more easily and efficiently" ### asyncio asyncio是Python 3.4版本引入用来编写并发代码的标准库，直接内置了对异步IO的支持。 asyncio的编程模型就是一个单线程的消息循环。从asyncio模块中直接获取一个EventLoop的引用，然后把需要执行的协程扔到EventLoop中执行，就实现了异步IO。 ### aiohttp aiohttp - 基于asyncio实现的HTTP框架。 aiohttp强调的是异步并发。提供了对asyncio/await的支持，可以实现单线程并发IO操作。 #### 单线程的asyncio为什么速度会更快呢？ - 多线程是基于系统的，协程是基于线程的，多线程上下文切换有陷入内核态的消耗，协程就没有，协程更轻量 - Python的GIL阻止两个线程在同一个程序中同时执行，有时候多线程并没有单线程速度快。 - 而Scrapy是基于twited的单线程框架，消息队列和事件循环在一个线程来回切换，downloader是多线程的 #### 详细操作文档请参考博客或者github: https://blog.csdn.net/weixin_43582101/article/details/106258518 https://github.com/lixi5338619/asyncpy Thanks : Scrapy、Ruia、Looter、asyncio、aiohttp 公众号《Pythonlx》

نیازمندی

مقدار	نام
-	lxml
-	parsel
-	docopt
-	aiohttp

زبان مورد نیاز

مقدار	نام
>=3.6	Python

نحوه نصب

نصب پکیج whl asyncpy-1.2.0:

pip install asyncpy-1.2.0.whl

نصب پکیج tar.gz asyncpy-1.2.0:

pip install asyncpy-1.2.0.tar.gz