Розробка експертної системи аналізу результатів вступних компаній до ВНЗ

Автор(и)

  • Anna Pazylova ДВНЗ УДХТУ, Україна https://orcid.org/0000-0001-5087-5903
  • Oleksandr Kapitonov ДВНЗ УДХТУ, Україна
  • Tetyana Dubovyk ДВНЗ УДХТУ, Україна

DOI:

https://doi.org/10.20998/2413-4295.2017.53.05

Ключові слова:

big data, python, scrapy, machine leatning, парсинг, аналіз великих обсягів даних.

Анотація

Аналіз мережі Інтернет на наявність великих обсягів даних про студентів спеціальності "комп'ютерна інженерія". Синтаксичний аналіз (парсинг) сайтів https://abit-poisk.org.ua і https://vk.com, з використанням мови програмування Python, за допомогою фреймворка Scrapy і vk API. Статистичний аналіз отриманих даних за методом найменших квадратів. Побудова моделей машинного навчання за методами KNN і Random Forest.  

Посилання

Examples of Big Data Projects. URL: http://www.acquia.com/examples-big-data-projects.

Feed exports ― Scrapy 1.4.0 documentation. URL: https://scrapy.readthedocs.io/en/latest/topics/feed-exports.html/.

Habrahabr // Analysis of Big Data URL: http://habrahabr.ru/company/moex/blog/256747/.

Habrahabr // Big Data from A to Z. URL: https://habrahabr.ru/company/dca/blog/267361/.

Hulianytskyi, L. F., Riasna I. I Automatic Classification Method Based on a Fuzzy Similarity Relation. Cybernetics and Systems Analysis, 2016, № 1, Р. 32-38. – doi:10.1007/sl10559-016-9796-3.

Madaan, A., Sharma, V., Pahwa, P. Hadoop: Solution to Unstructured Data Handling. Big Data Analytics. Advances in Intelligent Systems and Computing, 2017, № 1, Р. 47-54. – doi: 10.1007/978-981-10-6620-7-6.

Nadich, A. BigData: problem, technology, market. URL: http://www.compress.ru/artide.aspx?id=22725&iid=1044

Skobelev, V. V. Analysis of the structure of attributed transition systems without hidden transitions. Cybernetics and Systems Analysis, 2017, № 2, Р. 165-170. – doi:10.1007/sl10559-017-9916-8.

Artemov, C. Big Data: new updates for business. // URL: http://www.pcweek.ru/upload/iblock/d05/jet-big-data.pdf

Barsegan, А., Kyprinov M., Holod I., Stepanenko E. Methods and models of data analysis: OLAP and Data Mining. - BHV - Petersburg, BHV - Petersburg, 2004. - P. 90.

##submission.downloads##

Опубліковано

2017-12-25

Як цитувати

Pazylova, A., Kapitonov, O., & Dubovyk, T. (2017). Розробка експертної системи аналізу результатів вступних компаній до ВНЗ. Вісник Національного технічного університету «ХПІ». Серія: Нові рішення у сучасних технологіях, (53(1274), 35–39. https://doi.org/10.20998/2413-4295.2017.53.05

Номер

№ 53(1274) (2017): Вісник НТУ «ХПІ»: Серія "Нові рішення у сучасних технологіях"

Розділ

Інформаційні технології та системи управління

Ліцензія

Журнал публікує статті згідно з ліцензією Creative Commons Attribution International CC-BY.