معرفی شرکت ها


ao3scraper-1.0.2


Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

توضیحات

ao3scraper is a python webscraper that scrapes AO3 for fanfiction data, stores it in a database, and highlights entries when they are updated.
ویژگی مقدار
سیستم عامل -
نام فایل ao3scraper-1.0.2
نام ao3scraper
نسخه کتابخانه 1.0.2
نگهدارنده []
ایمیل نگهدارنده []
نویسنده Ethan
ایمیل نویسنده ethanjohnleitch@gmail.com
آدرس صفحه اصلی https://github.com/EthanLeitch/ao3scraper
آدرس اینترنتی https://pypi.org/project/ao3scraper/
مجوز GPL-3.0-or-later
# ao3scraper A python webscraper that scrapes AO3 for fanfiction data, stores it in a database, and highlights entries when they are updated. ![Fanfics Table](https://i.ibb.co/80r9vwR/Fanfic-Table.png) *Table with an updated entry highlighted.* ## Installation You can easily install the latest version from pip: pip3 install ao3scraper ### Development Installation Create a python virtual environment with `python3 -m venv dev_venv` and activate it. Then, install required packages with: poetry install This will also install ao3scraper into the virtual environment. ## Usage Usage: ao3scraper [OPTIONS] Options: -s, --scrape Launches scraping mode. -c, --cache Prints the last scraped table. -l, --list Lists all entries in the database. -a, --add TEXT Adds a single url to the database. --add-urls Opens a text file to add multiple urls to the database. -d, --delete INTEGER Deletes an entry from the database. -v, --version Display version of ao3scraper and other info. --help Show this message and exit. ## Configuration ao3scraper is ridiculously customisable, and most aspects of the program can be modified from here. To find the configuration file location, run `python3 ao3scraper -v`. ao3scraper uses [rich](https://rich.readthedocs.io/en/stable/style.html)'s styling. To disable any styling options, replace the styling value with 'none'. Fics have many attributes that are not displayed by default. To add these columns, create a new option under table_template, like so: ```yaml table_template: - column: characters # The specified attribute name: Characters :) # This is what the column will be labelled as styles: none # Rich styling ``` A complete list of attributes can be found [on the wiki](https://github.com/EthanLeitch/ao3scraper/wiki/Fic-Attributes/). ## Migrating the database If you're updating from a legacy version of ao3scraper (before 1.0.0), move `fics.db` to the data location. This can be found by running `python3 ao3scraper -v`. The migration wizard will then prompt you to upgrade your database. If you accept, a backup of the current `fics.db` will be created in `/backups`, and migration will proceed. ## Contributing Contributions are always appreciated. Submit a pull request with your suggested changes! ## Acknowledgements ao3scraper would not be possible without the existence of [ao3_api](https://github.com/ArmindoFlores/ao3_api/) and the work of its [contributors](https://github.com/ArmindoFlores/ao3_api/graphs/contributors).


نیازمندی

مقدار نام
==4.11.1 beautifulsoup4
==2022.5.18.1 certifi
==4.0.0 chardet
==8.0.1 click
==0.9.1 commonmark
==2.10 idna
==2.12.0 Pygments
==6.0 PyYAML
==2.25.1 requests
==12.4.1 rich
==2.3.2.post1 soupsieve
==1.26.9 urllib3
>=5.3.0,<6.0.0 configparser
>=2.3.0,<3.0.0 ao3-api
>=1.4.41,<2.0.0 SQLAlchemy
>=0.28.1,<0.29.0 marshmallow-sqlalchemy
>=5.8.1,<6.0.0 deepdiff[murmur]
>=0.9.0,<0.10.0 dictdiffer
>=1.0.1,<2.0.0 pathlib
>=2.5.4,<3.0.0 platformdirs
>=1.8.1,<2.0.0 alembic
>=0.17.21,<0.18.0 ruamel-yaml


زبان مورد نیاز

مقدار نام
>=3.10,<4.0 Python


نحوه نصب


نصب پکیج whl ao3scraper-1.0.2:

    pip install ao3scraper-1.0.2.whl


نصب پکیج tar.gz ao3scraper-1.0.2:

    pip install ao3scraper-1.0.2.tar.gz