Разработка Web-модуля для парсинга данных с сайтов торговых площадок

Abstract

Объектом исследования является извлечение данных о товарах и отзывов с сайтов торговых площадок. Цель работы – проектирование и разработка веб-модуля для извлечения данных с возможностью его дальнейшего включения в системы интеллектуального анализа данных. Данная цель обусловлена необходимостью иметь структурированные и подготовленные для анализа большие объемы данных. Проблема сложности анализа информации человеком без подобных систем актуальна для пользователей интернет-магазинов с огромным количеством отзывов на каждый товар. В ходе работы были выработаны требования к разрабатываемому модулю, спроектирована архитектура и разработана первая рабочая версия модуля для торговой площадки Amazon, а также определено направление дальнейшего развития модуля. ?

Object of a research is extraction of data on goods and responses from the websites of trading floors. The work purpose – design and development of the web module for extraction of data with a possibility of its further inclusion in the systems of data mining. This purpose is caused by need to have large volumes of data structured and prepared for the analysis. The problem of complexity of the analysis of information the person without similar systems is relevant for users of online stores with a huge number of reviews on each goods. During work requirements to the developed module were developed, the architecture is designed and the first working version of the module is developed for Amazon trading floor and also the direction of further development of the module is defined.