Разработка алгоритма для анализа и обработки больших данных

Abstract

В настоящее время интернет является не только средством связи и получения различных сведений, но и обширным ресурсом, который предоставляет возможность узнать о человеке заочно. Поэтому на данный момент времени, данных собрано такое огромное количество, что процесс предобработки данных многие программисты попросту игнорируют. BigData - технологии, которые извлекают максимальную пользу из больших данных, но многие не умеют проводить первоначальную обработку и чистку данных, что приводит к большому количеству ошибок, при дальнейшей работе с ними.

Currently, the Internet is not only a means of communication and receiving various information, but also an extensive resource that provides an opportunity to learn about a person in absentia. Therefore, at this point in time, such a huge amount of data has been collected that many programmers simply ignore the process of data pre-processing. BigData - technologies that extract the maximum benefit from big data, but many do not know how to carry out the initial processing and cleaning of data, which leads to a large number of errors, with further work with them.