StorageReview.com

Google решает задачи обработки больших данных с помощью обновлений BigQuery и Dataflow.

Предприятие  ◇  ПРОГРАММНОЕ ОБЕСПЕЧЕНИЕ

Большие данные часто встречаются в сфере управления данными. Использование больших данных может привести к тому, что предприятия получат множество ценных аналитических выводов, которые сделают их более эффективными и прибыльными. Единственная проблема заключается в том, что использование больших данных может быть довольно трудоемким процессом с точки зрения управления ресурсами и администрирования систем. Google планирует решать задачи, связанные с большими данными, «облачным способом» с помощью Google Cloud Platform, обновлений BigQuery и внедрения Cloud Dataflow.

Платформа Google Cloud предлагает набор мощных, масштабируемых и простых в использовании сервисов для работы с большими данными, позволяя клиентам внедрять облачные технологии для обработки больших данных. Первый из них — Google Cloud Dataflow, обеспечивающий надежную потоковую обработку данных на основе событий, доступную по умолчанию. Второй — это обновления Google BigQuery, первоклассного облачного сервиса для SQL-аналитики с API-интерфейсом. Эти обновления включают функции безопасности и производительности, в том числе разрешения на уровне строк, теперь с ограничением по умолчанию на 100 000 строк в секунду на таблицу.

Облачный подход Google к обработке больших данных направлен на получение более быстрых и качественных аналитических выводов из больших данных без необходимости беспокоиться о базовой инфраструктуре. Он включает в себя:

  • NoOps: «NoOps» означает, что платформа берет на себя подобные задачи и оптимизацию за пользователей, освобождая их от необходимости тратить время на изучение и использование ценности своих данных.
  • Экономическая эффективность: платформа автоматически масштабируется и оптимизирует потребление инфраструктуры пользователя, а также исключает неиспользуемые ресурсы, такие как простаивающие кластеры. Пользователи управляют затратами, регулируя количество запросов и задержку их обработки на основе анализа соотношения затрат и выгод.
  • Безопасное и простое сотрудничество: пользователи могут обмениваться наборами данных из файлов в Google Cloud Storage или таблиц в Google BigQuery с коллегами внутри или за пределами своей организации без необходимости создавать копии или предоставлять доступ к базе данных.

Наряду с BigQuery и Cloud Dataflow, Google дополняет свою стратегию обработки больших данных в облаке сервисом Google Cloud Pub/Sub. Pub/Sub позволяет пользователям обрабатывать данные с низкой задержкой в ​​режиме реального времени.

Доступность

Google BigQuery уже доступен с возможностью хранения данных на платформах Google Cloud Platforms в европейских регионах, а Google Cloud Dataflow находится в стадии бета-тестирования.

Google Большой запрос

Облачный поток данных Google

Обсудите эту историю

Взаимодействуйте со StorageReview

Рассылка | YouTube | Подкаст | iTunes / Spotify | Instagram | Twitter | TikTok | RSS-лента

Адам Армстронг

Адам — главный редактор новостей StorageReview.com, он руководит нашими внутренними и внештатными командами по созданию контента.