linguistic_preprocessing.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Лингвистическая предобработка"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 18,
   "metadata": {},
   "outputs": [],
   "source": [
    "import pandas as pd\n",
    "import numpy as np\n",
    "\n",
    "import nltk\n",
    "from nltk.stem import SnowballStemmer\n",
    "from nltk.corpus import stopwords\n",
    "import pymorphy2"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## 1. Выгружаем заранее подготовленные базы данных:"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df = pd.read_csv(\"reviews_data_base_clean.csv\")\n",
    "clean_df_company = pd.read_csv(\"rgs_reviews_data_base_clean.csv\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 6,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df = clean_df.drop('Unnamed: 0', 1)\n",
    "clean_df_company = clean_df_company.drop('Unnamed: 0', 1)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## 2. Выполним процедуру токенизации\n",
    "*Токенизация* - выделение слов и знаков пунктуации – токенов"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 8,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df[\"tokens\"] = clean_df[\"full_review\"].apply(nltk.word_tokenize)\n",
    "clean_df_company[\"tokens\"] = clean_df_company[\"full_review\"].apply(nltk.word_tokenize)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## 3. Проведем процедуру удаления стоп-слов"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 11,
   "metadata": {},
   "outputs": [],
   "source": [
    "stops = set(stopwords.words(\"russian\"))                  \n",
    "\n",
    "def remove_stop(row):\n",
    "    my_list = row['tokens']\n",
    "    meaningful_words = [w for w in my_list if not w in stops]\n",
    "    return (meaningful_words)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 14,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df['tokens_meaningful'] = clean_df.apply(remove_stop, axis=1)\n",
    "clean_df_company['tokens_meaningful'] = clean_df_company.apply(remove_stop, axis=1)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 15,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<style scoped>\n",
       "    .dataframe tbody tr th:only-of-type {\n",
       "        vertical-align: middle;\n",
       "    }\n",
       "\n",
       "    .dataframe tbody tr th {\n",
       "        vertical-align: top;\n",
       "    }\n",
       "\n",
       "    .dataframe thead th {\n",
       "        text-align: right;\n",
       "    }\n",
       "</style>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>company</th>\n",
       "      <th>city</th>\n",
       "      <th>product</th>\n",
       "      <th>header</th>\n",
       "      <th>review</th>\n",
       "      <th>mark</th>\n",
       "      <th>date</th>\n",
       "      <th>link</th>\n",
       "      <th>full_review</th>\n",
       "      <th>class</th>\n",
       "      <th>tokens</th>\n",
       "      <th>tokens_meaningful</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>0</th>\n",
       "      <td>renessans-strahovanie</td>\n",
       "      <td>Санкт-Петербург</td>\n",
       "      <td>Каско</td>\n",
       "      <td>По каско отлично работают</td>\n",
       "      <td>В январе 2020 произошла не очень приятная ситу...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>по каско отлично работают в январе      произо...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[по, каско, отлично, работают, в, январе, прои...</td>\n",
       "      <td>[каско, отлично, работают, январе, произошла, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1</th>\n",
       "      <td>alfastrahovanie-jizn</td>\n",
       "      <td>Калининград</td>\n",
       "      <td>Инвестиционное страхование</td>\n",
       "      <td>3 года назад оформила договор страхования жизн...</td>\n",
       "      <td>Срок действия договора закончился и начались п...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/al...</td>\n",
       "      <td>года назад оформила договор страхования жизн...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[года, назад, оформила, договор, страхования, ...</td>\n",
       "      <td>[года, назад, оформила, договор, страхования, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2</th>\n",
       "      <td>astro-volga</td>\n",
       "      <td>Смоленск</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Покупка ОСАГО</td>\n",
       "      <td>Благодарю сотрудников Астро-Волга за оперативн...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/as...</td>\n",
       "      <td>покупка осаго благодарю сотрудников астро волг...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[покупка, осаго, благодарю, сотрудников, астро...</td>\n",
       "      <td>[покупка, осаго, благодарю, сотрудников, астро...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>3</th>\n",
       "      <td>absolute-insurance</td>\n",
       "      <td>Краснодар</td>\n",
       "      <td>Страхование жизни</td>\n",
       "      <td>Профессионализм</td>\n",
       "      <td>Много лет являюсь клиентом данной страховой ко...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ab...</td>\n",
       "      <td>профессионализм  много лет являюсь клиентом да...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[профессионализм, много, лет, являюсь, клиенто...</td>\n",
       "      <td>[профессионализм, лет, являюсь, клиентом, данн...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>4</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Самара</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Очень приятное обслуживание</td>\n",
       "      <td>Хотелось бы выразить благодарность специалисту...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>очень приятное обслуживание  хотелось бы выраз...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[очень, приятное, обслуживание, хотелось, бы, ...</td>\n",
       "      <td>[очень, приятное, обслуживание, хотелось, выра...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>5</th>\n",
       "      <td>ingosstrah-jizn</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Страхование жизни</td>\n",
       "      <td>выплата страховки</td>\n",
       "      <td>Год спустя получил страховочную выплату так ка...</td>\n",
       "      <td>4.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/in...</td>\n",
       "      <td>выплата страховки год спустя получил страховоч...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[выплата, страховки, год, спустя, получил, стр...</td>\n",
       "      <td>[выплата, страховки, год, спустя, получил, стр...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>6</th>\n",
       "      <td>renessans-zhizn</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Инвестиционное страхование</td>\n",
       "      <td>Мне подходит по всем параметрам</td>\n",
       "      <td>Вместо банковского депозита в этот раз отложил...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>10-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>мне подходит по всем параметрам вместо банковс...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[мне, подходит, по, всем, параметрам, вместо, ...</td>\n",
       "      <td>[подходит, всем, параметрам, вместо, банковско...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>7</th>\n",
       "      <td>astro-volga</td>\n",
       "      <td>Тольятти</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Отличное обслуживание</td>\n",
       "      <td>Здравствуйте!Много лет являемся клиентами данн...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>10-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/as...</td>\n",
       "      <td>отличное обслуживание здравствуйте много лет я...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[отличное, обслуживание, здравствуйте, много, ...</td>\n",
       "      <td>[отличное, обслуживание, здравствуйте, лет, яв...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>8</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Челябинск</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Отличная страховая компания!</td>\n",
       "      <td>Очень давно являюсь клиентом ЮГОРИИ, в начале ...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>10-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>отличная страховая компания   очень давно явля...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[отличная, страховая, компания, очень, давно, ...</td>\n",
       "      <td>[отличная, страховая, компания, очень, давно, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>9</th>\n",
       "      <td>sberbank-strah-zhizn</td>\n",
       "      <td>Санкт-Петербург</td>\n",
       "      <td>Другое</td>\n",
       "      <td>СБЕРБАНК - последний банк, куда рекомендую обр...</td>\n",
       "      <td>27 октября 2020 года у меня закончился срок до...</td>\n",
       "      <td>2.0</td>\n",
       "      <td>10-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/sb...</td>\n",
       "      <td>сбербанк   последний банк  куда рекомендую обр...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[сбербанк, последний, банк, куда, рекомендую, ...</td>\n",
       "      <td>[сбербанк, последний, банк, рекомендую, обрати...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>10</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Всегда оформляю осаго</td>\n",
       "      <td>Люблю эту компанию, хорошее отношение, все быс...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>10-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>всегда оформляю осаго  люблю эту компанию  хор...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[всегда, оформляю, осаго, люблю, эту, компанию...</td>\n",
       "      <td>[оформляю, осаго, люблю, компанию, хорошее, от...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>11</th>\n",
       "      <td>absolute-insurance</td>\n",
       "      <td>Ленинск-Кузнецкий</td>\n",
       "      <td>Страхование ипотеки</td>\n",
       "      <td>Абсолютно все-супер!</td>\n",
       "      <td>По рекомендации друга решил оформить полис в С...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>10-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ab...</td>\n",
       "      <td>абсолютно все супер  по рекомендации друга реш...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[абсолютно, все, супер, по, рекомендации, друг...</td>\n",
       "      <td>[абсолютно, супер, рекомендации, друга, решил,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12</th>\n",
       "      <td>renessans-zhizn</td>\n",
       "      <td>Таганрог</td>\n",
       "      <td>Страхование жизни</td>\n",
       "      <td>В банке обманом навязали Страхование</td>\n",
       "      <td>В октябре месяце я пришла в Московский индустр...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>в банке обманом навязали страхование  в октябр...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[в, банке, обманом, навязали, страхование, в, ...</td>\n",
       "      <td>[банке, обманом, навязали, страхование, октябр...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>13</th>\n",
       "      <td>sogaz</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Страхование ипотеки</td>\n",
       "      <td>Брали ипотеку в Втб,они предложили страхование...</td>\n",
       "      <td>Дозвониться им невозможно, анкету почему-то за...</td>\n",
       "      <td>3.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/so...</td>\n",
       "      <td>брали ипотеку в втб они предложили страхование...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[брали, ипотеку, в, втб, они, предложили, стра...</td>\n",
       "      <td>[брали, ипотеку, втб, предложили, страхование,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>14</th>\n",
       "      <td>soglasie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Отличный сервис, рекомендую</td>\n",
       "      <td>В СК \"Согласие\" я оформила ОСАГО. К моему боль...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/so...</td>\n",
       "      <td>отличный сервис  рекомендую в ск  согласие  я ...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[отличный, сервис, рекомендую, в, ск, согласие...</td>\n",
       "      <td>[отличный, сервис, рекомендую, ск, согласие, о...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>15</th>\n",
       "      <td>alfastrahovanie</td>\n",
       "      <td>Пермь</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Благодарность \"АльфаСтрахование\" и \"Сатурн-Р-А...</td>\n",
       "      <td>15 августа случилось ДТП в г. Перми. Новая маш...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/al...</td>\n",
       "      <td>благодарность  альфастрахование  и  сатурн р а...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[благодарность, альфастрахование, и, сатурн, р...</td>\n",
       "      <td>[благодарность, альфастрахование, сатурн, р, а...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>16</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Тамбов</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Спасибо большое Екатерине из Тамбовского филиа...</td>\n",
       "      <td>Помогла разобраться с отказом, что пришёл мне ...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>спасибо большое екатерине из тамбовского филиа...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[спасибо, большое, екатерине, из, тамбовского,...</td>\n",
       "      <td>[спасибо, большое, екатерине, тамбовского, фил...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>17</th>\n",
       "      <td>renessans-strahovanie</td>\n",
       "      <td>Омск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>быстро все починили по страховке каско</td>\n",
       "      <td>Живу в Омске. В конце мая произошло дтп в райо...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>быстро все починили по страховке каско  живу в...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[быстро, все, починили, по, страховке, каско, ...</td>\n",
       "      <td>[быстро, починили, страховке, каско, живу, омс...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>18</th>\n",
       "      <td>gayde</td>\n",
       "      <td>Ростов-на-Дону</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>После ДТП протянули 20 дней по оценке и насчит...</td>\n",
       "      <td>После оценки ущерба, длившейся целых 20 дней, ...</td>\n",
       "      <td>2.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ga...</td>\n",
       "      <td>после дтп протянули    дней по оценке и насчит...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[после, дтп, протянули, дней, по, оценке, и, н...</td>\n",
       "      <td>[дтп, протянули, дней, оценке, насчитали, грош...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>19</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Челябинск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Страхование автомобиля в Югории</td>\n",
       "      <td>Являюсь клиентом Югории уже 5 лет. Очень хорош...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>страхование автомобиля в югории являюсь клиент...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[страхование, автомобиля, в, югории, являюсь, ...</td>\n",
       "      <td>[страхование, автомобиля, югории, являюсь, кли...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>20</th>\n",
       "      <td>energogarant</td>\n",
       "      <td>Челябинск</td>\n",
       "      <td>Страхование жизни</td>\n",
       "      <td>Отстойная компания</td>\n",
       "      <td>Александр из Челябинска.Застраховал детей в эт...</td>\n",
       "      <td>3.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/en...</td>\n",
       "      <td>отстойная компания александр из челябинска зас...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[отстойная, компания, александр, из, челябинск...</td>\n",
       "      <td>[отстойная, компания, александр, челябинска, з...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>21</th>\n",
       "      <td>absolute-insurance</td>\n",
       "      <td>Кемерово</td>\n",
       "      <td>Страхование ипотеки</td>\n",
       "      <td>Ипотечное страхование</td>\n",
       "      <td>Обратилась  по страхованию жизни и ипотеки по ...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ab...</td>\n",
       "      <td>ипотечное страхование  обратилась  по страхова...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[ипотечное, страхование, обратилась, по, страх...</td>\n",
       "      <td>[ипотечное, страхование, обратилась, страхован...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>22</th>\n",
       "      <td>renessans-strahovanie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Обслуживание</td>\n",
       "      <td>Все очень плохо !!! Электронное ОСАГО оформить...</td>\n",
       "      <td>Все очень плохо !!! Электронное ОСАГО оформить...</td>\n",
       "      <td>2.0</td>\n",
       "      <td>09-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>все очень плохо     электронное осаго оформить...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[все, очень, плохо, электронное, осаго, оформи...</td>\n",
       "      <td>[очень, плохо, электронное, осаго, оформить, с...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>23</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Страхование имущества и недвижимости</td>\n",
       "      <td>Застраховал ОСАГО и квартиру</td>\n",
       "      <td>Застраховал квартиру, думал дорого, оказалось ...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>застраховал осаго и квартиру  застраховал квар...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[застраховал, осаго, и, квартиру, застраховал,...</td>\n",
       "      <td>[застраховал, осаго, квартиру, застраховал, кв...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>24</th>\n",
       "      <td>renessans-strahovanie</td>\n",
       "      <td>Санкт-Петербург</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Приятно удивили</td>\n",
       "      <td>Страхую свою машину в страховой компании Ренес...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>приятно удивили страхую свою машину в страхово...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[приятно, удивили, страхую, свою, машину, в, с...</td>\n",
       "      <td>[приятно, удивили, страхую, машину, страховой,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>25</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Тамбов</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Восстановили после ДТП на отлично</td>\n",
       "      <td>30 июня 20 года в Тамбове попал в сильное ДТП....</td>\n",
       "      <td>5.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>восстановили после дтп на отлично     июня    ...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[восстановили, после, дтп, на, отлично, июня, ...</td>\n",
       "      <td>[восстановили, дтп, отлично, июня, года, тамбо...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>26</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Оформила ОСАГО и очень довольна</td>\n",
       "      <td>Много лет страхуюсь в этой компании, довольна ...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформила осаго и очень довольна много лет стра...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформила, осаго, и, очень, довольна, много, л...</td>\n",
       "      <td>[оформила, осаго, очень, довольна, лет, страху...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>27</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Салехард</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Оформили Осаго заранее</td>\n",
       "      <td>Хочу выразить слова благодарности менеджерам в...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформили осаго заранее хочу выразить слова бла...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформили, осаго, заранее, хочу, выразить, сло...</td>\n",
       "      <td>[оформили, осаго, заранее, хочу, выразить, сло...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>28</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Самара</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>С Югорией не первый год</td>\n",
       "      <td>Был у меня и страховой случай, всë прошло норм...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>с югорией не первый год был у меня и страховой...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[с, югорией, не, первый, год, был, у, меня, и,...</td>\n",
       "      <td>[югорией, первый, год, страховой, случай, вс, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>29</th>\n",
       "      <td>ingosstrah</td>\n",
       "      <td>Красногорск</td>\n",
       "      <td>Страхование ипотеки</td>\n",
       "      <td>Безобразие!!!</td>\n",
       "      <td>Работу делают вовремя, но ужасно!!!Менеджер А-...</td>\n",
       "      <td>3.0</td>\n",
       "      <td>08-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/in...</td>\n",
       "      <td>безобразие    работу делают вовремя  но ужасно...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[безобразие, работу, делают, вовремя, но, ужас...</td>\n",
       "      <td>[безобразие, работу, делают, вовремя, ужасно, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>...</th>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "      <td>...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12055</th>\n",
       "      <td>maks</td>\n",
       "      <td>Оренбург</td>\n",
       "      <td>Обслуживание</td>\n",
       "      <td>Сегодня обратился в страховую компанию МАКС. П...</td>\n",
       "      <td>Спросил у свободного работника смогу ли я офор...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ma...</td>\n",
       "      <td>сегодня обратился в страховую компанию макс  п...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[сегодня, обратился, в, страховую, компанию, м...</td>\n",
       "      <td>[сегодня, обратился, страховую, компанию, макс...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12056</th>\n",
       "      <td>renessans-strahovanie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Обращение по КАСКО от 10.10.14 Рено Дастер, ДТ...</td>\n",
       "      <td>Деньги Вы получаете с удовольствием, расхвалив...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>обращение по каско от          рено дастер  дт...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[обращение, по, каско, от, рено, дастер, дтп, ...</td>\n",
       "      <td>[обращение, каско, рено, дастер, дтп, ярославл...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12057</th>\n",
       "      <td>swiss-garant</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Я поехал в Ярославль на праздниках и там попал...</td>\n",
       "      <td>Пришлось ездить с разбитым бамером, капотом на...</td>\n",
       "      <td>4.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/sw...</td>\n",
       "      <td>я поехал в ярославль на праздниках и там попал...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[я, поехал, в, ярославль, на, праздниках, и, т...</td>\n",
       "      <td>[поехал, ярославль, праздниках, попал, дтп, за...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12058</th>\n",
       "      <td>sovcombank-strahovanie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Туристическая страховка</td>\n",
       "      <td>Нахожусь в тайланде на пхукете. Случилась со м...</td>\n",
       "      <td>Со смещением. Тк я застрахована по договору 70...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/so...</td>\n",
       "      <td>нахожусь в тайланде на пхукете  случилась со м...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[нахожусь, в, тайланде, на, пхукете, случилась...</td>\n",
       "      <td>[нахожусь, тайланде, пхукете, случилась, мной,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12059</th>\n",
       "      <td>severnaj-kazna</td>\n",
       "      <td>Астрахань</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Прошло 2 недели с прошлого отзыва, см. ниже. Н...</td>\n",
       "      <td>Позвонил в Астраханский филиал сегодня, с наме...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/se...</td>\n",
       "      <td>прошло   недели с прошлого отзыва  см  ниже  н...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[прошло, недели, с, прошлого, отзыва, см, ниже...</td>\n",
       "      <td>[прошло, недели, прошлого, отзыва, см, ниже, н...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12060</th>\n",
       "      <td>rstk</td>\n",
       "      <td>Москва</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Российский союз автостраховщиков (РСА) приступ...</td>\n",
       "      <td>общий объем обязательств которого перед клиент...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/rs...</td>\n",
       "      <td>российский союз автостраховщиков  рса  приступ...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[российский, союз, автостраховщиков, рса, прис...</td>\n",
       "      <td>[российский, союз, автостраховщиков, рса, прис...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12061</th>\n",
       "      <td>sovcombank-strahovanie</td>\n",
       "      <td>Санкт-Петербург</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Управляю а⁄м с 89г., первое в моей жизни ДТП п...</td>\n",
       "      <td>если бы не верный расчет на Либерти страховани...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/so...</td>\n",
       "      <td>управляю а м с   г   первое в моей жизни дтп п...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[управляю, а, м, с, г, первое, в, моей, жизни,...</td>\n",
       "      <td>[управляю, м, г, первое, моей, жизни, дтп, про...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12062</th>\n",
       "      <td>transneft</td>\n",
       "      <td>Москва</td>\n",
       "      <td>ДМС</td>\n",
       "      <td>По вопросам организации и получения медицинско...</td>\n",
       "      <td>Видимо разбудила менеджера Мамаеву Н.Л. Нет см...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/tr...</td>\n",
       "      <td>по вопросам организации и получения медицинско...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[по, вопросам, организации, и, получения, меди...</td>\n",
       "      <td>[вопросам, организации, получения, медицинской...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12063</th>\n",
       "      <td>bin-strahovanie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Дело у–000–105874⁄14. Все документы были подан...</td>\n",
       "      <td>Сегодня с этого дня прошло три недели, никаког...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/bi...</td>\n",
       "      <td>дело у                все документы были подан...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[дело, у, все, документы, были, поданы, в, ск,...</td>\n",
       "      <td>[дело, документы, поданы, ск, бин, страхование...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12064</th>\n",
       "      <td>reso-garantiya</td>\n",
       "      <td>Владимир</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>6 декабря 2014 застраховала машину. 31–го дека...</td>\n",
       "      <td>Выплатили 2 рубля 99 копеек! Ура, товарищи! Ре...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>декабря      застраховала машину     го дека...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[декабря, застраховала, машину, го, декабря, в...</td>\n",
       "      <td>[декабря, застраховала, машину, го, декабря, в...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12065</th>\n",
       "      <td>alfastrahovanie</td>\n",
       "      <td>Зеленодольск</td>\n",
       "      <td>Обслуживание</td>\n",
       "      <td>Купила телефон в Связном, для большей гарантии...</td>\n",
       "      <td>и т к телефон был кнопочный, до суда не дошло,...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/al...</td>\n",
       "      <td>купила телефон в связном  для большей гарантии...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[купила, телефон, в, связном, для, большей, га...</td>\n",
       "      <td>[купила, телефон, связном, большей, гарантии, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12066</th>\n",
       "      <td>sguralsib</td>\n",
       "      <td>Кемерово</td>\n",
       "      <td>Каско</td>\n",
       "      <td>22 сентября 2014года произошло ДТП, в котором ...</td>\n",
       "      <td>Сразу было видно, что ОСАГО виновника ДТП не п...</td>\n",
       "      <td>4.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/sg...</td>\n",
       "      <td>сентября     года произошло дтп  в котором ...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[сентября, года, произошло, дтп, в, котором, м...</td>\n",
       "      <td>[сентября, года, произошло, дтп, котором, авто...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12067</th>\n",
       "      <td>reso-garantiya</td>\n",
       "      <td>Белгород</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Три года покупала  страховку в компании Рессо ...</td>\n",
       "      <td>Вызвали комиссаров– оформили, посмотрела на са...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>05-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>три года покупала  страховку в компании рессо ...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[три, года, покупала, страховку, в, компании, ...</td>\n",
       "      <td>[года, покупала, страховку, компании, рессо, г...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12068</th>\n",
       "      <td>soglasie</td>\n",
       "      <td>Железнодорожный</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>17 декабря 2014г. был подан полный пакет докум...</td>\n",
       "      <td>29 декабря было составлено платежное платежное...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>04-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/so...</td>\n",
       "      <td>декабря     г  был подан полный пакет докум...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[декабря, г, был, подан, полный, пакет, докуме...</td>\n",
       "      <td>[декабря, г, подан, полный, пакет, документов,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12069</th>\n",
       "      <td>avangard-polis</td>\n",
       "      <td>Серпухов</td>\n",
       "      <td>Каско</td>\n",
       "      <td>решил застраховать машину в авангард полис, ра...</td>\n",
       "      <td>Оформление вышло в час где то, немного долго( ...</td>\n",
       "      <td>4.0</td>\n",
       "      <td>04-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/av...</td>\n",
       "      <td>решил застраховать машину в авангард полис  ра...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[решил, застраховать, машину, в, авангард, пол...</td>\n",
       "      <td>[решил, застраховать, машину, авангард, полис,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12070</th>\n",
       "      <td>sovcombank-strahovanie</td>\n",
       "      <td>Санкт-Петербург</td>\n",
       "      <td>ДМС</td>\n",
       "      <td>Нахожусь в хургаде. Сегодня утром упала и повр...</td>\n",
       "      <td>Попросила подругу связаться с офисом. Полтора ...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>04-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/so...</td>\n",
       "      <td>нахожусь в хургаде  сегодня утром упала и повр...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[нахожусь, в, хургаде, сегодня, утром, упала, ...</td>\n",
       "      <td>[нахожусь, хургаде, сегодня, утром, упала, пов...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12071</th>\n",
       "      <td>guta-strahovanie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>КАК ДО ВАС ДОЗВОНИТЬСЯ, НИКОГДА НЕ ОТВЕЧАЮТ</td>\n",
       "      <td>ПОДАЛ В ДЕКАБРЕ ,№0681656 , ВСЕ ЕЩЕ ЖДУ...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>04-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/gu...</td>\n",
       "      <td>как до вас дозвониться  никогда не отвечают по...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[как, до, вас, дозвониться, никогда, не, отвеч...</td>\n",
       "      <td>[дозвониться, отвечают, подал, декабре, жду]</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12072</th>\n",
       "      <td>vtb-strahovanie</td>\n",
       "      <td>Москва</td>\n",
       "      <td>Страхование имущества и недвижимости</td>\n",
       "      <td>адрес для отправки пакета документов предостав...</td>\n",
       "      <td>Если дозваниваешься то информацию по корректно...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>04-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/vt...</td>\n",
       "      <td>адрес для отправки пакета документов предостав...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[адрес, для, отправки, пакета, документов, пре...</td>\n",
       "      <td>[адрес, отправки, пакета, документов, предоста...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12073</th>\n",
       "      <td>maks</td>\n",
       "      <td>Оренбург</td>\n",
       "      <td>Обслуживание</td>\n",
       "      <td>Предварительно позвонив, узнав что мне нужно с...</td>\n",
       "      <td>провела в очереди час времени,чтобы услышать о...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>04-Feb-2015</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ma...</td>\n",
       "      <td>предварительно позвонив  узнав что мне нужно с...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[предварительно, позвонив, узнав, что, мне, ну...</td>\n",
       "      <td>[предварительно, позвонив, узнав, нужно, сдела...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12074</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12075</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12076</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12077</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12078</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12079</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12080</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12081</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12082</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12083</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>12084</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Ноябрьск</td>\n",
       "      <td>Каско</td>\n",
       "      <td>Оформил мини каско</td>\n",
       "      <td>Если бы девочки из компании мне не объяснили ч...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>оформил мини каско если бы девочки из компании...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[оформил, мини, каско, если, бы, девочки, из, ...</td>\n",
       "      <td>[оформил, мини, каско, девочки, компании, объя...</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "<p>12085 rows × 12 columns</p>\n",
       "</div>"
      ],
      "text/plain": [
       "                      company               city  \\\n",
       "0       renessans-strahovanie    Санкт-Петербург   \n",
       "1        alfastrahovanie-jizn        Калининград   \n",
       "2                 astro-volga           Смоленск   \n",
       "3          absolute-insurance          Краснодар   \n",
       "4                    yugoriya             Самара   \n",
       "5             ingosstrah-jizn             Москва   \n",
       "6             renessans-zhizn             Москва   \n",
       "7                 astro-volga           Тольятти   \n",
       "8                    yugoriya          Челябинск   \n",
       "9        sberbank-strah-zhizn    Санкт-Петербург   \n",
       "10                   yugoriya           Ноябрьск   \n",
       "11         absolute-insurance  Ленинск-Кузнецкий   \n",
       "12            renessans-zhizn           Таганрог   \n",
       "13                      sogaz             Москва   \n",
       "14                   soglasie             Москва   \n",
       "15            alfastrahovanie              Пермь   \n",
       "16                   yugoriya             Тамбов   \n",
       "17      renessans-strahovanie               Омск   \n",
       "18                      gayde     Ростов-на-Дону   \n",
       "19                   yugoriya          Челябинск   \n",
       "20               energogarant          Челябинск   \n",
       "21         absolute-insurance           Кемерово   \n",
       "22      renessans-strahovanie             Москва   \n",
       "23                   yugoriya           Ноябрьск   \n",
       "24      renessans-strahovanie    Санкт-Петербург   \n",
       "25                   yugoriya             Тамбов   \n",
       "26                   yugoriya           Ноябрьск   \n",
       "27                   yugoriya           Салехард   \n",
       "28                   yugoriya             Самара   \n",
       "29                 ingosstrah        Красногорск   \n",
       "...                       ...                ...   \n",
       "12055                    maks           Оренбург   \n",
       "12056   renessans-strahovanie             Москва   \n",
       "12057            swiss-garant             Москва   \n",
       "12058  sovcombank-strahovanie             Москва   \n",
       "12059          severnaj-kazna          Астрахань   \n",
       "12060                    rstk             Москва   \n",
       "12061  sovcombank-strahovanie    Санкт-Петербург   \n",
       "12062               transneft             Москва   \n",
       "12063         bin-strahovanie             Москва   \n",
       "12064          reso-garantiya           Владимир   \n",
       "12065         alfastrahovanie       Зеленодольск   \n",
       "12066               sguralsib           Кемерово   \n",
       "12067          reso-garantiya           Белгород   \n",
       "12068                soglasie    Железнодорожный   \n",
       "12069          avangard-polis           Серпухов   \n",
       "12070  sovcombank-strahovanie    Санкт-Петербург   \n",
       "12071        guta-strahovanie             Москва   \n",
       "12072         vtb-strahovanie             Москва   \n",
       "12073                    maks           Оренбург   \n",
       "12074                yugoriya           Ноябрьск   \n",
       "12075                yugoriya           Ноябрьск   \n",
       "12076                yugoriya           Ноябрьск   \n",
       "12077                yugoriya           Ноябрьск   \n",
       "12078                yugoriya           Ноябрьск   \n",
       "12079                yugoriya           Ноябрьск   \n",
       "12080                yugoriya           Ноябрьск   \n",
       "12081                yugoriya           Ноябрьск   \n",
       "12082                yugoriya           Ноябрьск   \n",
       "12083                yugoriya           Ноябрьск   \n",
       "12084                yugoriya           Ноябрьск   \n",
       "\n",
       "                                    product  \\\n",
       "0                                     Каско   \n",
       "1                Инвестиционное страхование   \n",
       "2                                     ОСАГО   \n",
       "3                         Страхование жизни   \n",
       "4                                     ОСАГО   \n",
       "5                         Страхование жизни   \n",
       "6                Инвестиционное страхование   \n",
       "7                                     ОСАГО   \n",
       "8                                     ОСАГО   \n",
       "9                                    Другое   \n",
       "10                                    ОСАГО   \n",
       "11                      Страхование ипотеки   \n",
       "12                        Страхование жизни   \n",
       "13                      Страхование ипотеки   \n",
       "14                                    ОСАГО   \n",
       "15                                    ОСАГО   \n",
       "16                                    ОСАГО   \n",
       "17                                    Каско   \n",
       "18                                    ОСАГО   \n",
       "19                                    Каско   \n",
       "20                        Страхование жизни   \n",
       "21                      Страхование ипотеки   \n",
       "22                             Обслуживание   \n",
       "23     Страхование имущества и недвижимости   \n",
       "24                                    Каско   \n",
       "25                                    ОСАГО   \n",
       "26                                    ОСАГО   \n",
       "27                                    ОСАГО   \n",
       "28                                    ОСАГО   \n",
       "29                      Страхование ипотеки   \n",
       "...                                     ...   \n",
       "12055                          Обслуживание   \n",
       "12056                                 Каско   \n",
       "12057                                 Каско   \n",
       "12058               Туристическая страховка   \n",
       "12059                                 ОСАГО   \n",
       "12060                                 ОСАГО   \n",
       "12061                                 Каско   \n",
       "12062                                   ДМС   \n",
       "12063                                 Каско   \n",
       "12064                                 ОСАГО   \n",
       "12065                          Обслуживание   \n",
       "12066                                 Каско   \n",
       "12067                                 ОСАГО   \n",
       "12068                                 ОСАГО   \n",
       "12069                                 Каско   \n",
       "12070                                   ДМС   \n",
       "12071                                 ОСАГО   \n",
       "12072  Страхование имущества и недвижимости   \n",
       "12073                          Обслуживание   \n",
       "12074                                 Каско   \n",
       "12075                                 Каско   \n",
       "12076                                 Каско   \n",
       "12077                                 Каско   \n",
       "12078                                 Каско   \n",
       "12079                                 Каско   \n",
       "12080                                 Каско   \n",
       "12081                                 Каско   \n",
       "12082                                 Каско   \n",
       "12083                                 Каско   \n",
       "12084                                 Каско   \n",
       "\n",
       "                                                  header  \\\n",
       "0                              По каско отлично работают   \n",
       "1      3 года назад оформила договор страхования жизн...   \n",
       "2                                          Покупка ОСАГО   \n",
       "3                                       Профессионализм    \n",
       "4                           Очень приятное обслуживание    \n",
       "5                                      выплата страховки   \n",
       "6                        Мне подходит по всем параметрам   \n",
       "7                                  Отличное обслуживание   \n",
       "8                          Отличная страховая компания!    \n",
       "9      СБЕРБАНК - последний банк, куда рекомендую обр...   \n",
       "10                                Всегда оформляю осаго    \n",
       "11                                  Абсолютно все-супер!   \n",
       "12                 В банке обманом навязали Страхование    \n",
       "13     Брали ипотеку в Втб,они предложили страхование...   \n",
       "14                           Отличный сервис, рекомендую   \n",
       "15     Благодарность \"АльфаСтрахование\" и \"Сатурн-Р-А...   \n",
       "16     Спасибо большое Екатерине из Тамбовского филиа...   \n",
       "17               быстро все починили по страховке каско    \n",
       "18     После ДТП протянули 20 дней по оценке и насчит...   \n",
       "19                       Страхование автомобиля в Югории   \n",
       "20                                    Отстойная компания   \n",
       "21                                Ипотечное страхование    \n",
       "22     Все очень плохо !!! Электронное ОСАГО оформить...   \n",
       "23                         Застраховал ОСАГО и квартиру    \n",
       "24                                       Приятно удивили   \n",
       "25                    Восстановили после ДТП на отлично    \n",
       "26                       Оформила ОСАГО и очень довольна   \n",
       "27                                Оформили Осаго заранее   \n",
       "28                               С Югорией не первый год   \n",
       "29                                         Безобразие!!!   \n",
       "...                                                  ...   \n",
       "12055  Сегодня обратился в страховую компанию МАКС. П...   \n",
       "12056  Обращение по КАСКО от 10.10.14 Рено Дастер, ДТ...   \n",
       "12057  Я поехал в Ярославль на праздниках и там попал...   \n",
       "12058  Нахожусь в тайланде на пхукете. Случилась со м...   \n",
       "12059  Прошло 2 недели с прошлого отзыва, см. ниже. Н...   \n",
       "12060  Российский союз автостраховщиков (РСА) приступ...   \n",
       "12061  Управляю а⁄м с 89г., первое в моей жизни ДТП п...   \n",
       "12062  По вопросам организации и получения медицинско...   \n",
       "12063  Дело у–000–105874⁄14. Все документы были подан...   \n",
       "12064  6 декабря 2014 застраховала машину. 31–го дека...   \n",
       "12065  Купила телефон в Связном, для большей гарантии...   \n",
       "12066  22 сентября 2014года произошло ДТП, в котором ...   \n",
       "12067  Три года покупала  страховку в компании Рессо ...   \n",
       "12068  17 декабря 2014г. был подан полный пакет докум...   \n",
       "12069  решил застраховать машину в авангард полис, ра...   \n",
       "12070  Нахожусь в хургаде. Сегодня утром упала и повр...   \n",
       "12071        КАК ДО ВАС ДОЗВОНИТЬСЯ, НИКОГДА НЕ ОТВЕЧАЮТ   \n",
       "12072  адрес для отправки пакета документов предостав...   \n",
       "12073  Предварительно позвонив, узнав что мне нужно с...   \n",
       "12074                                 Оформил мини каско   \n",
       "12075                                 Оформил мини каско   \n",
       "12076                                 Оформил мини каско   \n",
       "12077                                 Оформил мини каско   \n",
       "12078                                 Оформил мини каско   \n",
       "12079                                 Оформил мини каско   \n",
       "12080                                 Оформил мини каско   \n",
       "12081                                 Оформил мини каско   \n",
       "12082                                 Оформил мини каско   \n",
       "12083                                 Оформил мини каско   \n",
       "12084                                 Оформил мини каско   \n",
       "\n",
       "                                                  review  mark         date  \\\n",
       "0      В январе 2020 произошла не очень приятная ситу...   5.0  11-Dec-2020   \n",
       "1      Срок действия договора закончился и начались п...   1.0  11-Dec-2020   \n",
       "2      Благодарю сотрудников Астро-Волга за оперативн...   5.0  11-Dec-2020   \n",
       "3      Много лет являюсь клиентом данной страховой ко...   5.0  11-Dec-2020   \n",
       "4      Хотелось бы выразить благодарность специалисту...   5.0  11-Dec-2020   \n",
       "5      Год спустя получил страховочную выплату так ка...   4.0  11-Dec-2020   \n",
       "6      Вместо банковского депозита в этот раз отложил...   5.0  10-Dec-2020   \n",
       "7      Здравствуйте!Много лет являемся клиентами данн...   5.0  10-Dec-2020   \n",
       "8      Очень давно являюсь клиентом ЮГОРИИ, в начале ...   5.0  10-Dec-2020   \n",
       "9      27 октября 2020 года у меня закончился срок до...   2.0  10-Dec-2020   \n",
       "10     Люблю эту компанию, хорошее отношение, все быс...   5.0  10-Dec-2020   \n",
       "11     По рекомендации друга решил оформить полис в С...   5.0  10-Dec-2020   \n",
       "12     В октябре месяце я пришла в Московский индустр...   1.0  09-Dec-2020   \n",
       "13     Дозвониться им невозможно, анкету почему-то за...   3.0  09-Dec-2020   \n",
       "14     В СК \"Согласие\" я оформила ОСАГО. К моему боль...   5.0  09-Dec-2020   \n",
       "15     15 августа случилось ДТП в г. Перми. Новая маш...   5.0  09-Dec-2020   \n",
       "16     Помогла разобраться с отказом, что пришёл мне ...   5.0  09-Dec-2020   \n",
       "17     Живу в Омске. В конце мая произошло дтп в райо...   5.0  09-Dec-2020   \n",
       "18     После оценки ущерба, длившейся целых 20 дней, ...   2.0  09-Dec-2020   \n",
       "19     Являюсь клиентом Югории уже 5 лет. Очень хорош...   5.0  09-Dec-2020   \n",
       "20     Александр из Челябинска.Застраховал детей в эт...   3.0  09-Dec-2020   \n",
       "21     Обратилась  по страхованию жизни и ипотеки по ...   5.0  09-Dec-2020   \n",
       "22     Все очень плохо !!! Электронное ОСАГО оформить...   2.0  09-Dec-2020   \n",
       "23     Застраховал квартиру, думал дорого, оказалось ...   5.0  08-Dec-2020   \n",
       "24     Страхую свою машину в страховой компании Ренес...   5.0  08-Dec-2020   \n",
       "25     30 июня 20 года в Тамбове попал в сильное ДТП....   5.0  08-Dec-2020   \n",
       "26     Много лет страхуюсь в этой компании, довольна ...   5.0  08-Dec-2020   \n",
       "27     Хочу выразить слова благодарности менеджерам в...   5.0  08-Dec-2020   \n",
       "28     Был у меня и страховой случай, всë прошло норм...   5.0  08-Dec-2020   \n",
       "29     Работу делают вовремя, но ужасно!!!Менеджер А-...   3.0  08-Dec-2020   \n",
       "...                                                  ...   ...          ...   \n",
       "12055  Спросил у свободного работника смогу ли я офор...   1.0  05-Feb-2015   \n",
       "12056  Деньги Вы получаете с удовольствием, расхвалив...   1.0  05-Feb-2015   \n",
       "12057  Пришлось ездить с разбитым бамером, капотом на...   4.0  05-Feb-2015   \n",
       "12058  Со смещением. Тк я застрахована по договору 70...   1.0  05-Feb-2015   \n",
       "12059  Позвонил в Астраханский филиал сегодня, с наме...   1.0  05-Feb-2015   \n",
       "12060  общий объем обязательств которого перед клиент...   1.0  05-Feb-2015   \n",
       "12061  если бы не верный расчет на Либерти страховани...   5.0  05-Feb-2015   \n",
       "12062  Видимо разбудила менеджера Мамаеву Н.Л. Нет см...   1.0  05-Feb-2015   \n",
       "12063  Сегодня с этого дня прошло три недели, никаког...   1.0  05-Feb-2015   \n",
       "12064  Выплатили 2 рубля 99 копеек! Ура, товарищи! Ре...   1.0  05-Feb-2015   \n",
       "12065  и т к телефон был кнопочный, до суда не дошло,...   1.0  05-Feb-2015   \n",
       "12066  Сразу было видно, что ОСАГО виновника ДТП не п...   4.0  05-Feb-2015   \n",
       "12067  Вызвали комиссаров– оформили, посмотрела на са...   1.0  05-Feb-2015   \n",
       "12068  29 декабря было составлено платежное платежное...   1.0  04-Feb-2015   \n",
       "12069  Оформление вышло в час где то, немного долго( ...   4.0  04-Feb-2015   \n",
       "12070  Попросила подругу связаться с офисом. Полтора ...   1.0  04-Feb-2015   \n",
       "12071         ПОДАЛ В ДЕКАБРЕ ,№0681656 , ВСЕ ЕЩЕ ЖДУ...   1.0  04-Feb-2015   \n",
       "12072  Если дозваниваешься то информацию по корректно...   1.0  04-Feb-2015   \n",
       "12073  провела в очереди час времени,чтобы услышать о...   1.0  04-Feb-2015   \n",
       "12074  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12075  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12076  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12077  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12078  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12079  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12080  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12081  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12082  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12083  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "12084  Если бы девочки из компании мне не объяснили ч...   5.0  11-Dec-2020   \n",
       "\n",
       "                                                    link  \\\n",
       "0      https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "1      https://www.sravni.ru/strakhovaja-kompanija/al...   \n",
       "2      https://www.sravni.ru/strakhovaja-kompanija/as...   \n",
       "3      https://www.sravni.ru/strakhovaja-kompanija/ab...   \n",
       "4      https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "5      https://www.sravni.ru/strakhovaja-kompanija/in...   \n",
       "6      https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "7      https://www.sravni.ru/strakhovaja-kompanija/as...   \n",
       "8      https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "9      https://www.sravni.ru/strakhovaja-kompanija/sb...   \n",
       "10     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "11     https://www.sravni.ru/strakhovaja-kompanija/ab...   \n",
       "12     https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "13     https://www.sravni.ru/strakhovaja-kompanija/so...   \n",
       "14     https://www.sravni.ru/strakhovaja-kompanija/so...   \n",
       "15     https://www.sravni.ru/strakhovaja-kompanija/al...   \n",
       "16     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "17     https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "18     https://www.sravni.ru/strakhovaja-kompanija/ga...   \n",
       "19     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "20     https://www.sravni.ru/strakhovaja-kompanija/en...   \n",
       "21     https://www.sravni.ru/strakhovaja-kompanija/ab...   \n",
       "22     https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "23     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "24     https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "25     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "26     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "27     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "28     https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "29     https://www.sravni.ru/strakhovaja-kompanija/in...   \n",
       "...                                                  ...   \n",
       "12055  https://www.sravni.ru/strakhovaja-kompanija/ma...   \n",
       "12056  https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "12057  https://www.sravni.ru/strakhovaja-kompanija/sw...   \n",
       "12058  https://www.sravni.ru/strakhovaja-kompanija/so...   \n",
       "12059  https://www.sravni.ru/strakhovaja-kompanija/se...   \n",
       "12060  https://www.sravni.ru/strakhovaja-kompanija/rs...   \n",
       "12061  https://www.sravni.ru/strakhovaja-kompanija/so...   \n",
       "12062  https://www.sravni.ru/strakhovaja-kompanija/tr...   \n",
       "12063  https://www.sravni.ru/strakhovaja-kompanija/bi...   \n",
       "12064  https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "12065  https://www.sravni.ru/strakhovaja-kompanija/al...   \n",
       "12066  https://www.sravni.ru/strakhovaja-kompanija/sg...   \n",
       "12067  https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "12068  https://www.sravni.ru/strakhovaja-kompanija/so...   \n",
       "12069  https://www.sravni.ru/strakhovaja-kompanija/av...   \n",
       "12070  https://www.sravni.ru/strakhovaja-kompanija/so...   \n",
       "12071  https://www.sravni.ru/strakhovaja-kompanija/gu...   \n",
       "12072  https://www.sravni.ru/strakhovaja-kompanija/vt...   \n",
       "12073  https://www.sravni.ru/strakhovaja-kompanija/ma...   \n",
       "12074  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12075  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12076  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12077  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12078  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12079  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12080  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12081  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12082  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12083  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "12084  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "\n",
       "                                             full_review  class  \\\n",
       "0      по каско отлично работают в январе      произо...    1.0   \n",
       "1        года назад оформила договор страхования жизн...   -1.0   \n",
       "2      покупка осаго благодарю сотрудников астро волг...    1.0   \n",
       "3      профессионализм  много лет являюсь клиентом да...    1.0   \n",
       "4      очень приятное обслуживание  хотелось бы выраз...    1.0   \n",
       "5      выплата страховки год спустя получил страховоч...    1.0   \n",
       "6      мне подходит по всем параметрам вместо банковс...    1.0   \n",
       "7      отличное обслуживание здравствуйте много лет я...    1.0   \n",
       "8      отличная страховая компания   очень давно явля...    1.0   \n",
       "9      сбербанк   последний банк  куда рекомендую обр...   -1.0   \n",
       "10     всегда оформляю осаго  люблю эту компанию  хор...    1.0   \n",
       "11     абсолютно все супер  по рекомендации друга реш...    1.0   \n",
       "12     в банке обманом навязали страхование  в октябр...   -1.0   \n",
       "13     брали ипотеку в втб они предложили страхование...   -1.0   \n",
       "14     отличный сервис  рекомендую в ск  согласие  я ...    1.0   \n",
       "15     благодарность  альфастрахование  и  сатурн р а...    1.0   \n",
       "16     спасибо большое екатерине из тамбовского филиа...    1.0   \n",
       "17     быстро все починили по страховке каско  живу в...    1.0   \n",
       "18     после дтп протянули    дней по оценке и насчит...   -1.0   \n",
       "19     страхование автомобиля в югории являюсь клиент...    1.0   \n",
       "20     отстойная компания александр из челябинска зас...   -1.0   \n",
       "21     ипотечное страхование  обратилась  по страхова...    1.0   \n",
       "22     все очень плохо     электронное осаго оформить...   -1.0   \n",
       "23     застраховал осаго и квартиру  застраховал квар...    1.0   \n",
       "24     приятно удивили страхую свою машину в страхово...    1.0   \n",
       "25     восстановили после дтп на отлично     июня    ...    1.0   \n",
       "26     оформила осаго и очень довольна много лет стра...    1.0   \n",
       "27     оформили осаго заранее хочу выразить слова бла...    1.0   \n",
       "28     с югорией не первый год был у меня и страховой...    1.0   \n",
       "29     безобразие    работу делают вовремя  но ужасно...   -1.0   \n",
       "...                                                  ...    ...   \n",
       "12055  сегодня обратился в страховую компанию макс  п...   -1.0   \n",
       "12056  обращение по каско от          рено дастер  дт...   -1.0   \n",
       "12057  я поехал в ярославль на праздниках и там попал...    1.0   \n",
       "12058  нахожусь в тайланде на пхукете  случилась со м...   -1.0   \n",
       "12059  прошло   недели с прошлого отзыва  см  ниже  н...   -1.0   \n",
       "12060  российский союз автостраховщиков  рса  приступ...   -1.0   \n",
       "12061  управляю а м с   г   первое в моей жизни дтп п...    1.0   \n",
       "12062  по вопросам организации и получения медицинско...   -1.0   \n",
       "12063  дело у                все документы были подан...   -1.0   \n",
       "12064    декабря      застраховала машину     го дека...   -1.0   \n",
       "12065  купила телефон в связном  для большей гарантии...   -1.0   \n",
       "12066     сентября     года произошло дтп  в котором ...    1.0   \n",
       "12067  три года покупала  страховку в компании рессо ...   -1.0   \n",
       "12068     декабря     г  был подан полный пакет докум...   -1.0   \n",
       "12069  решил застраховать машину в авангард полис  ра...    1.0   \n",
       "12070  нахожусь в хургаде  сегодня утром упала и повр...   -1.0   \n",
       "12071  как до вас дозвониться  никогда не отвечают по...   -1.0   \n",
       "12072  адрес для отправки пакета документов предостав...   -1.0   \n",
       "12073  предварительно позвонив  узнав что мне нужно с...   -1.0   \n",
       "12074  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12075  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12076  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12077  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12078  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12079  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12080  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12081  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12082  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12083  оформил мини каско если бы девочки из компании...    1.0   \n",
       "12084  оформил мини каско если бы девочки из компании...    1.0   \n",
       "\n",
       "                                                  tokens  \\\n",
       "0      [по, каско, отлично, работают, в, январе, прои...   \n",
       "1      [года, назад, оформила, договор, страхования, ...   \n",
       "2      [покупка, осаго, благодарю, сотрудников, астро...   \n",
       "3      [профессионализм, много, лет, являюсь, клиенто...   \n",
       "4      [очень, приятное, обслуживание, хотелось, бы, ...   \n",
       "5      [выплата, страховки, год, спустя, получил, стр...   \n",
       "6      [мне, подходит, по, всем, параметрам, вместо, ...   \n",
       "7      [отличное, обслуживание, здравствуйте, много, ...   \n",
       "8      [отличная, страховая, компания, очень, давно, ...   \n",
       "9      [сбербанк, последний, банк, куда, рекомендую, ...   \n",
       "10     [всегда, оформляю, осаго, люблю, эту, компанию...   \n",
       "11     [абсолютно, все, супер, по, рекомендации, друг...   \n",
       "12     [в, банке, обманом, навязали, страхование, в, ...   \n",
       "13     [брали, ипотеку, в, втб, они, предложили, стра...   \n",
       "14     [отличный, сервис, рекомендую, в, ск, согласие...   \n",
       "15     [благодарность, альфастрахование, и, сатурн, р...   \n",
       "16     [спасибо, большое, екатерине, из, тамбовского,...   \n",
       "17     [быстро, все, починили, по, страховке, каско, ...   \n",
       "18     [после, дтп, протянули, дней, по, оценке, и, н...   \n",
       "19     [страхование, автомобиля, в, югории, являюсь, ...   \n",
       "20     [отстойная, компания, александр, из, челябинск...   \n",
       "21     [ипотечное, страхование, обратилась, по, страх...   \n",
       "22     [все, очень, плохо, электронное, осаго, оформи...   \n",
       "23     [застраховал, осаго, и, квартиру, застраховал,...   \n",
       "24     [приятно, удивили, страхую, свою, машину, в, с...   \n",
       "25     [восстановили, после, дтп, на, отлично, июня, ...   \n",
       "26     [оформила, осаго, и, очень, довольна, много, л...   \n",
       "27     [оформили, осаго, заранее, хочу, выразить, сло...   \n",
       "28     [с, югорией, не, первый, год, был, у, меня, и,...   \n",
       "29     [безобразие, работу, делают, вовремя, но, ужас...   \n",
       "...                                                  ...   \n",
       "12055  [сегодня, обратился, в, страховую, компанию, м...   \n",
       "12056  [обращение, по, каско, от, рено, дастер, дтп, ...   \n",
       "12057  [я, поехал, в, ярославль, на, праздниках, и, т...   \n",
       "12058  [нахожусь, в, тайланде, на, пхукете, случилась...   \n",
       "12059  [прошло, недели, с, прошлого, отзыва, см, ниже...   \n",
       "12060  [российский, союз, автостраховщиков, рса, прис...   \n",
       "12061  [управляю, а, м, с, г, первое, в, моей, жизни,...   \n",
       "12062  [по, вопросам, организации, и, получения, меди...   \n",
       "12063  [дело, у, все, документы, были, поданы, в, ск,...   \n",
       "12064  [декабря, застраховала, машину, го, декабря, в...   \n",
       "12065  [купила, телефон, в, связном, для, большей, га...   \n",
       "12066  [сентября, года, произошло, дтп, в, котором, м...   \n",
       "12067  [три, года, покупала, страховку, в, компании, ...   \n",
       "12068  [декабря, г, был, подан, полный, пакет, докуме...   \n",
       "12069  [решил, застраховать, машину, в, авангард, пол...   \n",
       "12070  [нахожусь, в, хургаде, сегодня, утром, упала, ...   \n",
       "12071  [как, до, вас, дозвониться, никогда, не, отвеч...   \n",
       "12072  [адрес, для, отправки, пакета, документов, пре...   \n",
       "12073  [предварительно, позвонив, узнав, что, мне, ну...   \n",
       "12074  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12075  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12076  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12077  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12078  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12079  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12080  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12081  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12082  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12083  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "12084  [оформил, мини, каско, если, бы, девочки, из, ...   \n",
       "\n",
       "                                       tokens_meaningful  \n",
       "0      [каско, отлично, работают, январе, произошла, ...  \n",
       "1      [года, назад, оформила, договор, страхования, ...  \n",
       "2      [покупка, осаго, благодарю, сотрудников, астро...  \n",
       "3      [профессионализм, лет, являюсь, клиентом, данн...  \n",
       "4      [очень, приятное, обслуживание, хотелось, выра...  \n",
       "5      [выплата, страховки, год, спустя, получил, стр...  \n",
       "6      [подходит, всем, параметрам, вместо, банковско...  \n",
       "7      [отличное, обслуживание, здравствуйте, лет, яв...  \n",
       "8      [отличная, страховая, компания, очень, давно, ...  \n",
       "9      [сбербанк, последний, банк, рекомендую, обрати...  \n",
       "10     [оформляю, осаго, люблю, компанию, хорошее, от...  \n",
       "11     [абсолютно, супер, рекомендации, друга, решил,...  \n",
       "12     [банке, обманом, навязали, страхование, октябр...  \n",
       "13     [брали, ипотеку, втб, предложили, страхование,...  \n",
       "14     [отличный, сервис, рекомендую, ск, согласие, о...  \n",
       "15     [благодарность, альфастрахование, сатурн, р, а...  \n",
       "16     [спасибо, большое, екатерине, тамбовского, фил...  \n",
       "17     [быстро, починили, страховке, каско, живу, омс...  \n",
       "18     [дтп, протянули, дней, оценке, насчитали, грош...  \n",
       "19     [страхование, автомобиля, югории, являюсь, кли...  \n",
       "20     [отстойная, компания, александр, челябинска, з...  \n",
       "21     [ипотечное, страхование, обратилась, страхован...  \n",
       "22     [очень, плохо, электронное, осаго, оформить, с...  \n",
       "23     [застраховал, осаго, квартиру, застраховал, кв...  \n",
       "24     [приятно, удивили, страхую, машину, страховой,...  \n",
       "25     [восстановили, дтп, отлично, июня, года, тамбо...  \n",
       "26     [оформила, осаго, очень, довольна, лет, страху...  \n",
       "27     [оформили, осаго, заранее, хочу, выразить, сло...  \n",
       "28     [югорией, первый, год, страховой, случай, вс, ...  \n",
       "29     [безобразие, работу, делают, вовремя, ужасно, ...  \n",
       "...                                                  ...  \n",
       "12055  [сегодня, обратился, страховую, компанию, макс...  \n",
       "12056  [обращение, каско, рено, дастер, дтп, ярославл...  \n",
       "12057  [поехал, ярославль, праздниках, попал, дтп, за...  \n",
       "12058  [нахожусь, тайланде, пхукете, случилась, мной,...  \n",
       "12059  [прошло, недели, прошлого, отзыва, см, ниже, н...  \n",
       "12060  [российский, союз, автостраховщиков, рса, прис...  \n",
       "12061  [управляю, м, г, первое, моей, жизни, дтп, про...  \n",
       "12062  [вопросам, организации, получения, медицинской...  \n",
       "12063  [дело, документы, поданы, ск, бин, страхование...  \n",
       "12064  [декабря, застраховала, машину, го, декабря, в...  \n",
       "12065  [купила, телефон, связном, большей, гарантии, ...  \n",
       "12066  [сентября, года, произошло, дтп, котором, авто...  \n",
       "12067  [года, покупала, страховку, компании, рессо, г...  \n",
       "12068  [декабря, г, подан, полный, пакет, документов,...  \n",
       "12069  [решил, застраховать, машину, авангард, полис,...  \n",
       "12070  [нахожусь, хургаде, сегодня, утром, упала, пов...  \n",
       "12071       [дозвониться, отвечают, подал, декабре, жду]  \n",
       "12072  [адрес, отправки, пакета, документов, предоста...  \n",
       "12073  [предварительно, позвонив, узнав, нужно, сдела...  \n",
       "12074  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12075  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12076  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12077  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12078  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12079  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12080  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12081  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12082  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12083  [оформил, мини, каско, девочки, компании, объя...  \n",
       "12084  [оформил, мини, каско, девочки, компании, объя...  \n",
       "\n",
       "[12085 rows x 12 columns]"
      ]
     },
     "execution_count": 15,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "clean_df"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## 4. Проведем стемминг\n",
    "Стемминг – процесс выделения основы у слов для приведения к единой форме"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 16,
   "metadata": {},
   "outputs": [],
   "source": [
    "snowball = SnowballStemmer(language=\"russian\")\n",
    "\n",
    "def stem_list(row):\n",
    "    my_list = row['tokens_meaningful']\n",
    "    stemmed_list = [snowball.stem(word) for word in my_list]\n",
    "    return (stemmed_list)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df['stemmed_words'] = clean_df.apply(stem_list, axis=1)\n",
    "clean_df_company['stemmed_words'] = clean_df.apply(stem_list, axis=1)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## 5. Проведем лемматизацию\n",
    "Лемматизация - процесс приведения словоформы к лемме (начальной форме слова)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 19,
   "metadata": {},
   "outputs": [],
   "source": [
    "morph = pymorphy2.MorphAnalyzer()\n",
    "\n",
    "def lemma_list(row):\n",
    "    my_list = row['tokens_meaningful']\n",
    "    lemma_list = [morph.parse(word)[0].normal_form for word in my_list]\n",
    "    return (lemma_list)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 20,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df['lemmas'] = clean_df.apply(lemma_list, axis=1)\n",
    "clean_df_company['lemmas'] = clean_df_company.apply(lemma_list, axis=1)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 21,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<style scoped>\n",
       "    .dataframe tbody tr th:only-of-type {\n",
       "        vertical-align: middle;\n",
       "    }\n",
       "\n",
       "    .dataframe tbody tr th {\n",
       "        vertical-align: top;\n",
       "    }\n",
       "\n",
       "    .dataframe thead th {\n",
       "        text-align: right;\n",
       "    }\n",
       "</style>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>company</th>\n",
       "      <th>city</th>\n",
       "      <th>product</th>\n",
       "      <th>header</th>\n",
       "      <th>review</th>\n",
       "      <th>mark</th>\n",
       "      <th>date</th>\n",
       "      <th>link</th>\n",
       "      <th>full_review</th>\n",
       "      <th>class</th>\n",
       "      <th>tokens</th>\n",
       "      <th>tokens_meaningful</th>\n",
       "      <th>stemmed_words</th>\n",
       "      <th>lemmas</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>0</th>\n",
       "      <td>renessans-strahovanie</td>\n",
       "      <td>Санкт-Петербург</td>\n",
       "      <td>Каско</td>\n",
       "      <td>По каско отлично работают</td>\n",
       "      <td>В январе 2020 произошла не очень приятная ситу...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/re...</td>\n",
       "      <td>по каско отлично работают в январе      произо...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[по, каско, отлично, работают, в, январе, прои...</td>\n",
       "      <td>[каско, отлично, работают, январе, произошла, ...</td>\n",
       "      <td>[каск, отличн, работа, январ, произошл, очен, ...</td>\n",
       "      <td>[каско, отлично, работать, январь, произойти, ...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1</th>\n",
       "      <td>alfastrahovanie-jizn</td>\n",
       "      <td>Калининград</td>\n",
       "      <td>Инвестиционное страхование</td>\n",
       "      <td>3 года назад оформила договор страхования жизн...</td>\n",
       "      <td>Срок действия договора закончился и начались п...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/al...</td>\n",
       "      <td>года назад оформила договор страхования жизн...</td>\n",
       "      <td>-1.0</td>\n",
       "      <td>[года, назад, оформила, договор, страхования, ...</td>\n",
       "      <td>[года, назад, оформила, договор, страхования, ...</td>\n",
       "      <td>[год, назад, оформ, договор, страхован, жизн, ...</td>\n",
       "      <td>[год, назад, оформить, договор, страхование, ж...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2</th>\n",
       "      <td>astro-volga</td>\n",
       "      <td>Смоленск</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Покупка ОСАГО</td>\n",
       "      <td>Благодарю сотрудников Астро-Волга за оперативн...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/as...</td>\n",
       "      <td>покупка осаго благодарю сотрудников астро волг...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[покупка, осаго, благодарю, сотрудников, астро...</td>\n",
       "      <td>[покупка, осаго, благодарю, сотрудников, астро...</td>\n",
       "      <td>[покупк, осаг, благодар, сотрудник, астр, волг...</td>\n",
       "      <td>[покупка, осаго, благодарить, сотрудник, астро...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>3</th>\n",
       "      <td>absolute-insurance</td>\n",
       "      <td>Краснодар</td>\n",
       "      <td>Страхование жизни</td>\n",
       "      <td>Профессионализм</td>\n",
       "      <td>Много лет являюсь клиентом данной страховой ко...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/ab...</td>\n",
       "      <td>профессионализм  много лет являюсь клиентом да...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[профессионализм, много, лет, являюсь, клиенто...</td>\n",
       "      <td>[профессионализм, лет, являюсь, клиентом, данн...</td>\n",
       "      <td>[профессионализм, лет, явля, клиент, дан, стра...</td>\n",
       "      <td>[профессионализм, год, являться, клиент, дать,...</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>4</th>\n",
       "      <td>yugoriya</td>\n",
       "      <td>Самара</td>\n",
       "      <td>ОСАГО</td>\n",
       "      <td>Очень приятное обслуживание</td>\n",
       "      <td>Хотелось бы выразить благодарность специалисту...</td>\n",
       "      <td>5.0</td>\n",
       "      <td>11-Dec-2020</td>\n",
       "      <td>https://www.sravni.ru/strakhovaja-kompanija/yu...</td>\n",
       "      <td>очень приятное обслуживание  хотелось бы выраз...</td>\n",
       "      <td>1.0</td>\n",
       "      <td>[очень, приятное, обслуживание, хотелось, бы, ...</td>\n",
       "      <td>[очень, приятное, обслуживание, хотелось, выра...</td>\n",
       "      <td>[очен, приятн, обслуживан, хотел, выраз, благо...</td>\n",
       "      <td>[очень, приятный, обслуживание, хотеться, выра...</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "</div>"
      ],
      "text/plain": [
       "                 company             city                     product  \\\n",
       "0  renessans-strahovanie  Санкт-Петербург                       Каско   \n",
       "1   alfastrahovanie-jizn      Калининград  Инвестиционное страхование   \n",
       "2            astro-volga         Смоленск                       ОСАГО   \n",
       "3     absolute-insurance        Краснодар           Страхование жизни   \n",
       "4               yugoriya           Самара                       ОСАГО   \n",
       "\n",
       "                                              header  \\\n",
       "0                          По каско отлично работают   \n",
       "1  3 года назад оформила договор страхования жизн...   \n",
       "2                                      Покупка ОСАГО   \n",
       "3                                   Профессионализм    \n",
       "4                       Очень приятное обслуживание    \n",
       "\n",
       "                                              review  mark         date  \\\n",
       "0  В январе 2020 произошла не очень приятная ситу...   5.0  11-Dec-2020   \n",
       "1  Срок действия договора закончился и начались п...   1.0  11-Dec-2020   \n",
       "2  Благодарю сотрудников Астро-Волга за оперативн...   5.0  11-Dec-2020   \n",
       "3  Много лет являюсь клиентом данной страховой ко...   5.0  11-Dec-2020   \n",
       "4  Хотелось бы выразить благодарность специалисту...   5.0  11-Dec-2020   \n",
       "\n",
       "                                                link  \\\n",
       "0  https://www.sravni.ru/strakhovaja-kompanija/re...   \n",
       "1  https://www.sravni.ru/strakhovaja-kompanija/al...   \n",
       "2  https://www.sravni.ru/strakhovaja-kompanija/as...   \n",
       "3  https://www.sravni.ru/strakhovaja-kompanija/ab...   \n",
       "4  https://www.sravni.ru/strakhovaja-kompanija/yu...   \n",
       "\n",
       "                                         full_review  class  \\\n",
       "0  по каско отлично работают в январе      произо...    1.0   \n",
       "1    года назад оформила договор страхования жизн...   -1.0   \n",
       "2  покупка осаго благодарю сотрудников астро волг...    1.0   \n",
       "3  профессионализм  много лет являюсь клиентом да...    1.0   \n",
       "4  очень приятное обслуживание  хотелось бы выраз...    1.0   \n",
       "\n",
       "                                              tokens  \\\n",
       "0  [по, каско, отлично, работают, в, январе, прои...   \n",
       "1  [года, назад, оформила, договор, страхования, ...   \n",
       "2  [покупка, осаго, благодарю, сотрудников, астро...   \n",
       "3  [профессионализм, много, лет, являюсь, клиенто...   \n",
       "4  [очень, приятное, обслуживание, хотелось, бы, ...   \n",
       "\n",
       "                                   tokens_meaningful  \\\n",
       "0  [каско, отлично, работают, январе, произошла, ...   \n",
       "1  [года, назад, оформила, договор, страхования, ...   \n",
       "2  [покупка, осаго, благодарю, сотрудников, астро...   \n",
       "3  [профессионализм, лет, являюсь, клиентом, данн...   \n",
       "4  [очень, приятное, обслуживание, хотелось, выра...   \n",
       "\n",
       "                                       stemmed_words  \\\n",
       "0  [каск, отличн, работа, январ, произошл, очен, ...   \n",
       "1  [год, назад, оформ, договор, страхован, жизн, ...   \n",
       "2  [покупк, осаг, благодар, сотрудник, астр, волг...   \n",
       "3  [профессионализм, лет, явля, клиент, дан, стра...   \n",
       "4  [очен, приятн, обслуживан, хотел, выраз, благо...   \n",
       "\n",
       "                                              lemmas  \n",
       "0  [каско, отлично, работать, январь, произойти, ...  \n",
       "1  [год, назад, оформить, договор, страхование, ж...  \n",
       "2  [покупка, осаго, благодарить, сотрудник, астро...  \n",
       "3  [профессионализм, год, являться, клиент, дать,...  \n",
       "4  [очень, приятный, обслуживание, хотеться, выра...  "
      ]
     },
     "execution_count": 21,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "clean_df.head()"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## 6. Статистика по словам в документах (отзывах)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "База по рынку:"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 22,
   "metadata": {},
   "outputs": [],
   "source": [
    "all_words = [word for tokens in clean_df[\"tokens\"] for word in tokens]\n",
    "sentence_lengths = [len(tokens) for tokens in clean_df[\"tokens\"]]\n",
    "VOCAB = sorted(list(set(all_words)))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 32,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Общее количество слов во всех документах базы данных – 603729 слов, \n",
      "Размер словаря составляет 34630 слов\n",
      "Максимальное количество слов в отзыве: 96 слов\n",
      "Среднее количество слов в отзыве: 50 слов\n"
     ]
    }
   ],
   "source": [
    "print(\"Общее количество слов во всех документах базы данных – %s слов, \\nРазмер словаря составляет %s слов\" % (len(all_words), len(VOCAB)))\n",
    "print(\"Максимальное количество слов в отзыве: %s слов\" % max(sentence_lengths))\n",
    "print(\"Среднее количество слов в отзыве: %s слов\" % round(np.mean(sentence_lengths)))"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "База по компании:"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 23,
   "metadata": {},
   "outputs": [],
   "source": [
    "all_words_company = [word for tokens in clean_df_company[\"tokens\"] for word in tokens]\n",
    "sentence_lengths_company = [len(tokens) for tokens in clean_df_company[\"tokens\"]]\n",
    "VOCAB_company = sorted(list(set(all_words_company)))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 33,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Общее количество слов во всех документах базы данных – 83607 слов, \n",
      "Размер словаря составляет 12559 слов\n",
      "Максимальное количество слов в отзыве: 92 слов\n",
      "Среднее количество слов в отзыве: 57 слов\n"
     ]
    }
   ],
   "source": [
    "print(\"Общее количество слов во всех документах базы данных – %s слов, \\nРазмер словаря составляет %s слов\" % (len(all_words_company), len(VOCAB_company)))\n",
    "print(\"Максимальное количество слов в отзыве: %s слов\" % max(sentence_lengths_company))\n",
    "print(\"Среднее количество слов в отзыве: %s слов\" % round(np.mean(sentence_lengths_company)))"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "Ожидаемо, что общее количество слов во всех документах меньше у компании, чем по рынку. Среднее и максимальное количество слов находятся примерно на одном урове. Из этого показателя мы не можем сделать каких-либо выводов."
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "Сохраним в новые документы лингвистически предобработанные данные:"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 34,
   "metadata": {},
   "outputs": [],
   "source": [
    "clean_df.to_csv(\"reviews_data_base_clean_l.csv\")\n",
    "clean_df_company.to_csv(\"rgs_reviews_data_base_clean_l.csv\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {},
   "outputs": [],
   "source": []
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.7.1"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 2
}