معرفی شرکت ها


dask-deltatable-0.2


Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر
Card image cap
تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

توضیحات

Dask + Delta Table
ویژگی مقدار
سیستم عامل -
نام فایل dask-deltatable-0.2
نام dask-deltatable
نسخه کتابخانه 0.2
نگهدارنده ['rajagurunath']
ایمیل نگهدارنده ['gurunathrajagopal@gmail.com']
نویسنده -
ایمیل نویسنده -
آدرس صفحه اصلی -
آدرس اینترنتی https://pypi.org/project/dask-deltatable/
مجوز MIT
## Dask Deltatable Reader Reads a Delta Table from directory using Dask engine. To Try out the package: ``` pip install dask-deltatable ``` ### Features: 1. Reads the parquet files based on delta logs parallely using dask engine 2. Supports all three filesystem like s3, azurefs, gcsfs 3. Supports some delta features like - Time Travel - Schema evolution - parquet filters - row filter - partition filter 4. Query Delta commit info - History 5. vacuum the old/ unused parquet files 6. load different versions of data using datetime. ### Usage: ``` import dask_deltatable as ddt # read delta table ddt.read_delta_table("delta_path") # read delta table for specific version ddt.read_delta_table("delta_path",version=3) # read delta table for specific datetime ddt.read_delta_table("delta_path",datetime="2018-12-19T16:39:57-08:00") # read delta complete history ddt.read_delta_history("delta_path") # read delta history upto given limit ddt.read_delta_history("delta_path",limit=5) # read delta history to delete the files ddt.vacuum("delta_path",dry_run=False) # Can read from S3,azure,gcfs etc. ddt.read_delta_table("s3://bucket_name/delta_path",version=3) # please ensure the credentials are properly configured as environment variable or # configured as in ~/.aws/credential ```


نیازمندی

مقدار نام
- dask[dataframe,distributed]
- pyarrow
- deltalake
- pytest
- requests
>=2.10.1 pytest-cov


زبان مورد نیاز

مقدار نام
>=3.7 Python


نحوه نصب


نصب پکیج whl dask-deltatable-0.2:

    pip install dask-deltatable-0.2.whl


نصب پکیج tar.gz dask-deltatable-0.2:

    pip install dask-deltatable-0.2.tar.gz