Большие данные часто встречаются в сфере управления данными. Использование больших данных может привести к тому, что предприятия получат множество ценных аналитических выводов, которые сделают их более эффективными и прибыльными. Единственная проблема заключается в том, что использование больших данных может быть довольно трудоемким процессом с точки зрения управления ресурсами и администрирования систем. Google планирует решать задачи, связанные с большими данными, «облачным способом» с помощью Google Cloud Platform, обновлений BigQuery и внедрения Cloud Dataflow.
Платформа Google Cloud предлагает набор мощных, масштабируемых и простых в использовании сервисов для работы с большими данными, позволяя клиентам внедрять облачные технологии для обработки больших данных. Первый из них — Google Cloud Dataflow, обеспечивающий надежную потоковую обработку данных на основе событий, доступную по умолчанию. Второй — это обновления Google BigQuery, первоклассного облачного сервиса для SQL-аналитики с API-интерфейсом. Эти обновления включают функции безопасности и производительности, в том числе разрешения на уровне строк, теперь с ограничением по умолчанию на 100 000 строк в секунду на таблицу.
Облачный подход Google к обработке больших данных направлен на получение более быстрых и качественных аналитических выводов из больших данных без необходимости беспокоиться о базовой инфраструктуре. Он включает в себя:
- NoOps: «NoOps» означает, что платформа берет на себя подобные задачи и оптимизацию за пользователей, освобождая их от необходимости тратить время на изучение и использование ценности своих данных.
- Экономическая эффективность: платформа автоматически масштабируется и оптимизирует потребление инфраструктуры пользователя, а также исключает неиспользуемые ресурсы, такие как простаивающие кластеры. Пользователи управляют затратами, регулируя количество запросов и задержку их обработки на основе анализа соотношения затрат и выгод.
- Безопасное и простое сотрудничество: пользователи могут обмениваться наборами данных из файлов в Google Cloud Storage или таблиц в Google BigQuery с коллегами внутри или за пределами своей организации без необходимости создавать копии или предоставлять доступ к базе данных.
Наряду с BigQuery и Cloud Dataflow, Google дополняет свою стратегию обработки больших данных в облаке сервисом Google Cloud Pub/Sub. Pub/Sub позволяет пользователям обрабатывать данные с низкой задержкой в режиме реального времени.
Доступность
Google BigQuery уже доступен с возможностью хранения данных на платформах Google Cloud Platforms в европейских регионах, а Google Cloud Dataflow находится в стадии бета-тестирования.




Amazon