add object_type, finish_type, house_material_type and heating_type fields

Author: lenarsaitov

README.md

@@ -154,6 +154,8 @@ additional_settings = {
 * __kitchen_meters__ - площадь кухни
 * __rooms_count__ - количество комнат
 * __year_construction__ - год постройки здания
+* __house_material_type__ - тип дома (киричный/монолитный/панельный итд)
+* __heating_type__ - тип отопления
 * __price_per_month__ - стоимость в месяц
 * __price_per_m2__ - стоимость на квадратный метр
 * __commissions__ - комиссия, взымаемая при заселении
@@ -178,6 +180,8 @@ additional_settings = {
 При этом появляются новые:
 * __price__ - стоимость недвижимости
 * __residential_complex__ - название жилого комплекса
+* __object_type__ -  тип жилья (вторичка/новостройка)
+* __finish_type__ - отделка
 
 ### Сохранение данных
 Имеется возможность сохранения собираемых данных в режиме реального времени. Для этого необходимо подставить в аргументе 
@@ -248,7 +252,7 @@ The process of checking the proxies... Search an available one among them...
 
 4. Имеется флаг __is_express_mode__, при помощи которого можно существенно (___в 5-10 раз___) ускорить сбор данных благодаря отсутствию необходимости 
 заходить на каждую страницу с предложением. 
-Однако в таком случае <ins>__не будут__</ins> собираться данные о ___площади кухни___, ___годе постройки здания___ и ___номере телефона___.
+Однако в таком случае <ins>__не будут__</ins> собираться данные о ___площади кухни___, ___годе постройки здания___, типа дома, типа отделки, типа отопления, типа жилья  и ___номере телефона___.
 
 5. Данный парсер не будет работать в таком инструменте как [Google Colaboratory](https://colab.research.google.com/). 
 См. [подробности](https://github.com/lenarsaitov/cianparser/issues/1)

cianparser/constants.py

@@ -44,7 +44,7 @@
 
 SPECIFIC_FIELDS_FOR_RENT_LONG = {"price_per_month", "commissions"}
 SPECIFIC_FIELDS_FOR_RENT_SHORT = {"price_per_day"}
-SPECIFIC_FIELDS_FOR_SALE = {"price", "residential_complex"}
+SPECIFIC_FIELDS_FOR_SALE = {"price", "residential_complex", "object_type", "finish_type"}
 
 CITIES = [
     ['Москва', '1'],
@@ -118,7 +118,7 @@
     ['Псков', '4946'],
     ['Пущино', '4949'],
     ['Реутов', '4958'],
-    ['Ростов-На-Дону', '4959'],
+    ['Ростов-на-Дону', '4959'],
     ['Рошаль', '4960'],
     ['Рязань', '4963'],
     ['Салехард', '4965'],

cianparser/helpers.py

@@ -178,6 +178,10 @@ def parse_page_offer_json(html_offer):
 
     page_data = {
         "year_of_construction": -1,
+        "object_type": -1,
+        "house_material_type": -1,
+        "heating_type": -1,
+        "finish_type": -1,
         "living_meters": -1,
         "kitchen_meters": -1,
         "floor": -1,
@@ -188,9 +192,21 @@ def parse_page_offer_json(html_offer):
     spans = soup_offer_page.select("span")
 
     for index, span in enumerate(spans):
-        if "Год постройки" in span:
+        if "Год постройки" in span and len(spans[index + 1].text) < 5:
             page_data["year_of_construction"] = spans[index + 1].text
 
+        if "Тип жилья" == span.text:
+            page_data["object_type"] = spans[index + 1].text
+
+        if "Тип дома" == span.text:
+            page_data["house_material_type"] = spans[index + 1].text
+
+        if "Отопление" == span.text:
+            page_data["heating_type"] = spans[index + 1].text
+
+        if "Отделка" == span.text:
+            page_data["finish_type"] = spans[index + 1].text
+
     if page_data["year_of_construction"] == -1:
         p_tags = soup_offer_page.select("p")
 

setup.cfg

@@ -1,6 +1,6 @@
 [metadata]
 name = cianparser
-version = 0.4.28
+version = 0.4.29
 description = Parser information from Cian website
 url = https://github.com/lenarsaitov/cianparser
 author = Lenar Saitov

setup.py

@@ -6,7 +6,7 @@
 
 setup(
     name='cianparser',
-    version='0.4.28',
+    version='0.4.29',
     description='Parser information from Cian website',
     url='https://github.com/lenarsaitov/cianparser',
     author='Lenar Saitov',