Skip to content

[city dashboard] cars in Belarus #61

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Open
gsk990 opened this issue Apr 1, 2017 · 4 comments
Open

[city dashboard] cars in Belarus #61

gsk990 opened this issue Apr 1, 2017 · 4 comments
Assignees

Comments

@gsk990
Copy link
Member

gsk990 commented Apr 1, 2017

Попробовать парсить данные с автообъявлениями по маркам и моделям автомобилей. Самое важное - разработать скрипт, который мог бы с такого урла забирать параметры из индикаторов по:

  1. возрасту А/М,

  2. Цене (будем при анализе отсекать все объявы с ценой ниже 1.500, ибо там аварийные и не на ходу авто, я думаю, но собирать стоит все)
    $0$75 000
    01 0002 0004 0006 0008 00010 00012 00014 00016 00020 00030 00040 00075 000

  3. Год
    1960 2017 1960 1974 1989 2003 2017

  4. Объем дв.
    0 см36 000 см3
    01 5003 0004 5006 000

  5. Пробег

и выдавать ЦСВ с результатами с указанием из какого урла распаршена каждая строчка.

  1. желательно - попробовать на scrapy это сделать чтобы можно было запускать на scrapinghub.com
@sergeos
Copy link

sergeos commented Jun 27, 2017

Ресурс заблокирован в соответствии с законодательством Республики Беларусь

@abitrolly
Copy link
Member

Закрываем? Или нужен тикет на #мотолькопомоги для объяснения причин? =)

@gsk990
Copy link
Member Author

gsk990 commented Jul 11, 2017

я поищу другие источники. всё-таки автозор не единственную базу автообъявлений в беларуси вёл.

общественная полезность таких данных налицо - 3 миллиона автомобилей, из них Х не прошло даже техосмотр, а 72% имеют возраст более 10 лет - это очевидная общественная опасность по причине аварийности (старые авто чаще ломаются, хуже защищают пассажиров и больше травмируют пешеходов, хуже тормозят и не имеют АБС).

  • Экологическая опасность - старые автомобили создают значительно больше - минимум на 50% - вредных выбросов (120г/км CO2 для последнего Гольфа, или 8тонн за 5 лет, и 180г/км для десятилетнего или 12 тонн за 5 лет). Про двадцатилетние статистика молчит) Ну а белорусские нормы по выбросам для а/м в использовании по-прежнему очень мягкие (даже выкинув важные очищающие девайсы чтобы сэкономить - такие как сажевый фильтр или катализатор автолюбители продолжают проходить ТО по нормам выбросов!)
  • На данный момент только в Минске ездят 700 000 авто (данные ГАИ на 2014 год). Из них 7% имеют возраст до 5 лет, а 60-70% - больше 10 лет, около 20% - больше 20лет.

Это я подсчитал по автообъявлениям - сегодня в Минске через интернет продаётся около 53000 б/у автомобилей. Из этих автомобилей на продаже всего лишь 15 000 имеют возраст до 10 лет, а подавляющее большинство - 72% - больше 10 лет. Т.к. ещё мы знаем, что из всех 700 000 авто, в минске новых мало - новых автомобилей в Минске продаётся всего лишь около 10 000 в год, т.е. за 5 лет - 50 000. https://auto.tut.by/news/exclusive/515922.html

Ситуация не очень. В Париже запрещён въезд для 20летних авто с июля (подозреваю, что в Лондоне тоже), а у нас их ездит минимум 20-25%.
http://www.theverge.com/2016/6/1/11818990/paris-old-car-ban-pollution-smog-traffic
но как это связать визуально с данными загрязнения, я не знаю :)

по данным яндекс-пробок, на немиге, возле театра музкомедии, возле октябрьской, долгиновский тракт больше всего страдают от автопробок ну и связанного с этим загрязнения. http://belaruscity.net/probki_minsk_online.html (тут можно посмотреть прогноз пробок в пятницу 18 часов, например)

может быть, стоит эти данные от яндекс пробокс соместить с данными из нашего датасета (там 5 станций по минску берут пробы?) Можно посмотреть, если качество воздуха часто ухудшается в час пик, то виноваты автомобили.

Почему это важно:

  1. По данным Всемирной организации здравоохранения, Беларусь входит в тройку лидеров по удельному весу умерших из-за последствий загрязнения воздуха. Хуже обстоят дела лишь в Украине и Болгарии. http://naviny.by/article/20160929/1475127783-gde-v-belarusi-dyshat-horosho
  2. Если бы не ситуация с окружающей средой, Беларусь была бы на 52м месте во всемирном индексе процветания http://www.prosperity.com/
    А благодаря проблемам в экологии мы аж на 98м.

@gsk990
Copy link
Member Author

gsk990 commented Oct 2, 2017

сделан сэмпл данных за конец сентября 2017 г, ~44991 объявлений. Данные будут использоваться для некоммерческого анализа, сэмплы будут собираться ежемесячно, чтобы:

  • сравнить долю старых авто по городам и областям
  • сравнить долю дизельных/бензиновых авто помесячно (есть гипотеза, что люди медленнее обновляют автопарк и ездят на старых авто в связи с общим уровнем благосостояния).
  • сбор данных ежемесячно - механизм сделан товарищем @flerry за что ему огромное спасибо!
    avResearchDB-enc.zip

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

5 participants