Что такое большие данные — простое объяснение с примером

Термин «большие данные» все чаще используется практически повсюду на планете — онлайн и офлайн. И это касается не только компьютеров. Это связано с общим термином «информационные технологии», который теперь является частью почти всех других технологий, областей исследований и бизнеса. Большие данные — это не проблема. Шумиха вокруг этого, безусловно, довольно большая проблема, чтобы сбить вас с толку. В этой статье рассказывается, что такое большие данные. Он также содержит пример того, как NetFlix использовала свои данные, или, скорее, большие данные, чтобы лучше удовлетворять потребности своих клиентов.

Что такое большие данные

Что такое большие данные

Данные, хранящиеся на серверах вашей компании, до вчерашнего дня были просто отсортированными и сохраненными данными. Внезапно популярным стал сленг Big Data, и теперь данные в вашей компании — это Big Data. Этот термин охватывает все без исключения данные, которые ваша организация хранила до сих пор. Он включает данные, хранящиеся в облаках, и даже URL-адреса, которые вы добавили в закладки. Ваша компания могла не оцифровать все данные. Возможно, вы еще не структурировали все данные. Но тогда все цифровые, бумажные, структурированные и неструктурированные данные вашей компании теперь являются большими данными.

Короче говоря, все данные — независимо от того, классифицированы они или нет — на ваших серверах, вместе называются БОЛЬШИМИ ДАННЫМИ. Все эти данные можно использовать для получения разных результатов с помощью разных типов анализа. Необязательно, чтобы во всех анализах использовались все данные. В другом анализе используются разные части БОЛЬШИХ ДАННЫХ для получения необходимых результатов и прогнозов.

Программы для Windows, мобильные приложения, игры - ВСЁ БЕСПЛАТНО, в нашем закрытом телеграмм канале - Подписывайтесь:)

Большие данные — это, по сути, данные, которые вы анализируете для получения результатов, которые можно использовать для прогнозов и других целей. При использовании термина «большие данные» ваша компания или организация внезапно начинает работать с информационными технологиями верхнего уровня, чтобы вывести различные типы результатов, используя одни и те же данные, которые вы намеренно или непреднамеренно хранили на протяжении многих лет.

Насколько велики большие данные

По сути, все данные, вместе взятые, представляют собой большие данные, но многие исследователи согласны с тем, что большими данными как таковыми нельзя манипулировать с помощью обычных электронных таблиц и обычных инструментов управления базами данных. Им нужны специальные инструменты анализа, такие как Hadoop (мы изучим это в отдельном посте), чтобы все данные можно было проанализировать за один раз (может включать итерации анализа).

Вопреки вышесказанному, хотя я не являюсь экспертом в этом вопросе, я бы сказал, что данные любой организации — большой или маленькой, организованной или неорганизованной — являются большими данными для этой организации, и что организация может выбирать свои собственные инструменты для анализа данные.

Обычно для анализа данных люди создают разные наборы данных на основе одного или нескольких общих полей, что упрощает анализ. В случае с большими данными нет необходимости создавать подмножества для их анализа. Теперь у нас есть инструменты, которые могут анализировать данные независимо от их размера. Вероятно, эти инструменты сами классифицируют данные, даже когда они их анализируют.

Считаю важным упомянуть два предложения из книги Джимми Гутермана «Большие данные»:

«Большие данные: когда требования к размеру и производительности для управления данными становятся важными факторами проектирования и принятия решений при внедрении системы управления и анализа данных».

-И-

«Для некоторых организаций, впервые столкнувшись с сотнями гигабайт данных, может возникнуть необходимость пересмотреть варианты управления данными. Для других могут потребоваться десятки или сотни терабайт, прежде чем размер данных станет важным фактором ».

Итак, вы видите, что и объем, и анализ являются важной частью больших данных.

Прочтите: Что такое интеллектуальный анализ данных?

Концепции больших данных

Это еще один момент, с которым большинство людей не согласны. Некоторые эксперты говорят, что концепции больших данных — это три V:

  1. Объем
  2. Скорость
  3. Разнообразие

Некоторые другие добавляют к концепции еще несколько V:

  1. Визуализация
  2. Правдивость (надежность)
  3. Вариативность и
  4. Стоимость

Я расскажу о концепции больших данных в отдельной статье, так как этот пост уже набирает обороты. На мой взгляд, первых трех V достаточно, чтобы объяснить концепцию больших данных.

Пример больших данных — как NetFlix использовал его для решения своих проблем

Ближе к 2008 году в NetFlix произошел сбой, из-за которого многие клиенты остались в неведении. Хотя некоторые из них все еще могли получить доступ к потоковым сервисам, большинство из них не могли. Некоторым клиентам удалось получить взятые напрокат DVD, тогда как другим не удалось. В сообщении в блоге Wall Street Journal говорится, что Netflix только что запустил потоковую передачу по запросу.

Отключение заставило руководство задуматься о возможных будущих проблемах, а значит; он обратился к большим данным. Он проанализировал области с высоким трафиком, уязвимые точки, пропускную способность сети и т. Д., Используя эти данные, и работал над ними, чтобы сократить время простоя, если в будущем возникнет проблема, когда она станет глобальной. Вот это ссылка в блог Wall Street Journal, если вы хотите ознакомиться с примерами больших данных.

Вышеупомянутое кратко описывает, что такое большие данные на языке непрофессионала. Вы можете назвать это очень простым введением. Я планирую написать еще несколько статей о связанных факторах, таких как — концепции, анализ, инструменты и использование больших данных, большие данные 3 V и т. Д. Между тем, если вы хотите добавить что-нибудь к вышеизложенному, прокомментируйте и поделитесь с нами.

Читать дальше: Что такое парсинг веб-страниц?

.

Программы для Windows, мобильные приложения, игры - ВСЁ БЕСПЛАТНО, в нашем закрытом телеграмм канале - Подписывайтесь:)

Похожие записи

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *