معرفی شرکت ها

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

تبلیغات ما

مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.

مشاهده بیشتر

توضیحات

TopMind ETL helper

ویژگی	مقدار
سیستم عامل	-
نام فایل	etl-helper-talenttech-1.7.0
نام	etl-helper-talenttech
نسخه کتابخانه	1.7.0
نگهدارنده	[]
ایمیل نگهدارنده	[]
نویسنده	Dmitry Utiralov
ایمیل نویسنده	d.utiralov@talenttech.ru
آدرس صفحه اصلی	https://github.com/severgroup-tt/topmind-commons/tree/master/py/etl-helper
آدرس اینترنتی	https://pypi.org/project/etl-helper-talenttech/
مجوز	MIT

ETL table converter and creator ========== The Python Toolkit for converting table from one database to another Databases types ------------- Supported databases. You have to use short name of database short_name:type of database * ch:clickhouse * pg:postgresql * mysql:mysql * vertica:vertica * exasol:exasol Supported database conversions ------------- * mysql to pg * mysql to vertica * mysql to exasol * ch to vertica * pg to vertica Credentials ------------- ```sh sql_credentials = { "pg": { "database": os.getenv("PG_DATABASE"), "schema": os.getenv("PG_SCHEMA"), "user": os.getenv("PG_USER"), "host": os.getenv("PG_HOST"), "port": os.getenv("PG_PORT"), "password": os.getenv("PG_PASSWORD"), #additional params bellow (optional) "executemany_mode": "values", "executemany_values_page_size": 10000, "executemany_batch_page_size": 500, }, "ch": { "database": os.getenv("CH_DATABASE"), "user": os.getenv("CH_USER"), "host": os.getenv("CH_HOST"), "port": os.getenv("CH_PORT"), "password": os.getenv("CH_PASSWORD"), #additional params bellow (optional) "connect_args": { "alt_hosts": "{},{}:{}".format( os.getenv("CH_HOST_B"), os.getenv("CH_HOST_C"), os.getenv("CH_PORT") ) }, }, "vertica": { "database": os.getenv("VERTICA_DATABASE"), "schema": os.getenv("VERTICA_SCHEMA"), "user": os.getenv("VERTICA_USER"), "host": os.getenv("VERTICA_HOST"), "port": os.getenv("VERTICA_PORT"), "password": os.getenv("VERTICA_PASSWORD"), #additional params bellow (optional) "connect_args": { "connection_load_balance": True, "backup_server_node": json.loads(os.getenv("VERTICA_CONFIGS"))[ "backup_server_node" ], }, }, "mysql": { "database": os.getenv("MYSQL_DATABASE"), "user": os.getenv("MYSQL_USER"), "host": os.getenv("MYSQL_HOST"), "port": os.getenv("MYSQL_PORT"), "password": os.getenv("MYSQL_PASSWORD"), }, } ``` Usage ```sh pip3 install etl-helper-talenttech ``` ```python import os from converter.fields_converter import FieldsConverter from_db = "mysql" to_db = "vertica" tables = ["users", "user_to_mc"] converter = FieldsConverter(sql_credentials, from_db, to_db, tables=tables, advanced_features=[0, 1]) res = converter.create_list_of_tables(tables, to_create=True, dir_ddl=None) fields_from = converter.db_worker_from.get_columns(tables[0]) fields_to = converter.db_worker_to.get_columns(tables[0]) print(fields_from) print(fields_to)

نیازمندی

مقدار	نام
==1.4.42	sqlalchemy
-	python-dateutil
-	clickhouse-sqlalchemy
-	sqlalchemy-vertica-python
-	psycopg2-binary
-	requests

زبان مورد نیاز

مقدار	نام
>=3.6	Python

نحوه نصب

نصب پکیج whl etl-helper-talenttech-1.7.0:

pip install etl-helper-talenttech-1.7.0.whl

نصب پکیج tar.gz etl-helper-talenttech-1.7.0:

pip install etl-helper-talenttech-1.7.0.tar.gz