معرفی شرکت ها
analytics-lib-0.0.2
تبلیغات ما
مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.
مشاهده بیشتر
تبلیغات ما
مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.
مشاهده بیشتر
تبلیغات ما
مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.
مشاهده بیشتر
تبلیغات ما
مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.
مشاهده بیشتر
تبلیغات ما
مشتریان به طور فزاینده ای آنلاین هستند. تبلیغات می تواند به آنها کمک کند تا کسب و کار شما را پیدا کنند.
مشاهده بیشترتوضیحات
A package for psychotyping by text
| ویژگی | مقدار |
|---|---|
| سیستم عامل | - |
| نام فایل | analytics-lib-0.0.2 |
| نام | analytics-lib |
| نسخه کتابخانه | 0.0.2 |
| نگهدارنده | [] |
| ایمیل نگهدارنده | [] |
| نویسنده | Pokhachevskiy Vsevolod |
| ایمیل نویسنده | pokhachevskiy@gmail.com |
| آدرس صفحه اصلی | https://github.com/lyoshamipt/bortnik_psychometry |
| آدرس اینترنتی | https://pypi.org/project/analytics-lib/ |
| مجوز | - |
# Библиотека для анализа текстов
## Установка (требуется Python 3.8 и новее)
```
pip install analytics-lib
```
# Загрузка ресурсов для FastText и spacy моделей
```
python3 -m dostoevsky download fasttext-social-network-model
python3 -m spacy download ru_core_news_sm
```
## Загрузка ресурсов для ELMO и Stanza моделей
Следует скачать из папки Soft-Skill-Dev/21_nov по ссылке
https://drive.google.com/drive/folders/1T1NuaU1qPQsyAM_i55AsJPrsGA28EZ5j?usp=sharing
на Google Drive папку stanza_resources/ и разместить в папку с проектом по пути **PATH_TO_STANZA_RESOURCES**
Также следует скачать ресурсы для elmo-модели по ссылке http://vectors.nlpl.eu/repository/20/212.zip, разархивировать их
и разместить в папку с проектом по пути **PATH_TO_ELMO_RESOURCES**
## Загрузка pickle-файлов для усредненной статистики по текстам:
Из репозитория https://github.com/lyoshamipt/bortnik_psychometry
необходимо из папки analytics_lib/data скачать актуальные:
-- папки: *assessty_all*, *assessty_short*, *telecom*
-- файлы: *df_sense.pkl* и *verbs_df.pkl*
И поместить в папку с проектом по пути: **PATH_TO_PICKELS**
## Пример использования
```
PATH_TO_STANZA_RESOURCES = "../bortnik_psychometry/analytics_lib/notebooks/stanza_resources"
PATH_TO_ELMO_RESOURCES = "../bortnik_psychometry/analytics_lib/notebooks/elmo_resources"
PATH_TO_PICKELS = "../bortnik_psychometry/analytics_lib/data"
import sys
sys.path.append("../")
import warnings
import logging
import pandas as pd
import json
import sys
from morpholog import Morpholog
from dostoevsky.tokenization import RegexTokenizer
from dostoevsky.models import FastTextSocialNetworkModel
from matplotlib import rcParams
from pymystem3 import Mystem
from simple_elmo import ElmoModel
import stanza
import spacy
import snowballstemmer
import os
logging.disable(sys.maxsize)
warnings.filterwarnings("ignore")
# инициализация класса
from analytics_lib.nlp_texts.text import TextProcessor
mystem = Mystem()
nlp_core = stanza.Pipeline('ru', use_gpu=False, dir=PATH_TO_STANZA_RESOURCES)
morpholog = Morpholog()
tokenizer = RegexTokenizer()
ftsnm = FastTextSocialNetworkModel(tokenizer=tokenizer)
nlp_spacy = spacy.load("ru_core_news_sm")
stemmer = snowballstemmer.stemmer('russian')
import tensorflow.compat.v1 as tf
tf.reset_default_graph()
elmo_model = ElmoModel()
elmo_model.load(PATH_TO_ELMO_RESOURCES)
df_sense = pd.read_pickle(f"{PATH_TO_PICKELS}/df_sense.pkl")
verbs_df = pd.read_pickle(f"{PATH_TO_PICKELS}/verbs_df.pkl")
text_processor = TextProcessor(
m=mystem,
nlp_core=nlp_core,
morpholog=morpholog,
fastTextSocialNetworkModel=ftsnm,
nlp_spacy=nlp_spacy,
stemmer = stemmer,
elmo_model = elmo_model,
df_sense = df_sense,
verbs_df = verbs_df
)
# пример обработки текста
text = "Программа \"Вернём клиентов\" для дилеров ГаражТулс.В рамках развития дилерской сети за дополнительные деньги настроить триггерную рассылку для тех клиентов, которые ушли.\
Тестируем: берем лояльного дилера, предлагаем в качестве эксперимента предоставить нам клиентов, которые отказались от покупки (на их сайте или магазине). Собираем контакты, настраиваем триггерную рассылку. Смотрим на результат. Если успех, то проводим опрос на основных дилерах и показываем успешный кейс. Узнаем, сколько бы они заплатили за это. Дальше пробуем продать 2-3- дилерам такую услугу. (пока делаем всё вручную) Если они оплачивают, то гипотезу можно считать проверенной и можно запускать в разработку функционал.(и если юнит экономика сходится)Подключаем дилерскую CRM (или любую другую систему, где есть отвалившиеся клиенты) к системе триггерных рассылок. К пакету дилерских документов предлагаем новую услугу. Непринужденно зарабатываем."
dict_res = text_processor.text_statistics_woe(text=text, quantiles="assessty_short", PATH_TO_PICKELS = PATH_TO_PICKELS) # quantiles: 'assessty_all', "assessty_short", 'dialogs'
```
نیازمندی
| مقدار | نام |
|---|---|
| ==0.6.0 | dostoevsky |
| ==1.6 | morpholog |
| ==1.19.5 | numpy |
| ==1.3.5 | pandas |
| ==0.3.11 | pingouin |
| ==0.9.1 | pymorphy2 |
| ==0.2.0 | pymystem3 |
| ==0.11.2 | seaborn |
| ==0.8.0 | simple-elmo |
| ==2.1.0 | snowballstemmer |
| ==3.0.6 | spacy |
| ==1.2 | stanza |
| ==2.5.0 | tensorflow |
| ==1.1.0 | termcolor |
| ==2.5.0 | wordfreq |
نحوه نصب
نصب پکیج whl analytics-lib-0.0.2:
pip install analytics-lib-0.0.2.whl
نصب پکیج tar.gz analytics-lib-0.0.2:
pip install analytics-lib-0.0.2.tar.gz