慧博云通
百道助力慧博云通日志数据分析
公司简介
慧博云通科技股份有限公司成立于2009年，注册资金3亿6千万元，是一家专注于软件信息技术服务的国家高新技术企业。总部位于杭州，业务遍布全球，为金融、电信、互联网、高科技等行业客户提供专业技术服务。慧博云通矢志成为一家国际化、专业化、创新型的软件技术服务企业，持续为客户创造价值。
行业
互联网
案例背景及挑战
随着生产数据和日志变得越来越复杂，从日志捕获的数据中挖掘数据洞见变得更具挑战性。 日志的来源越来越多，因此很难整理和查询有用的信息。
方案架构描述
- 在应用服务器中安装Cloud Logging 代理，用于捕获日志消息
- 当 Logging 中提供日志后，脚本会使用 Cloud SDK 提供的 Logging 支持自动将日志路由到 Cloud Storage 存储分区。
- Dataflow 通过提取元数据和计算基本汇总数据来处理日志。
- Dataflow 流水线旨在每天处理日志元素，根据每天的日志为服务器响应时间生成汇总指标。
- Dataflow 的输出被加载到 BigQuery 表中，在此进行分析以提供商业智能。
- BigQuery 提供了一个高度可扩展、经济高效的选项，使我们能够实时捕获和分析数据
使用产品
- Cloud Logging
- Cloud Storage
- Anthos
- Pub/Sub
- Dataflow
- Big Query
方案特点
通过cloud logging实时收集应用程序和服务器运行时产生的日志，将其存储到Cloud Storage。对应用程序运行健康状态进行实时监控，通过Bigquery对日志进行分析，从而预知异常发生周期，提前做出处理方案。面对复杂多变的异常，还可以配合Cloud Monitoring对应用实时监控，从而第一时间了解到问题。进而减少异常宕机的时间。
客户收益
1、快速排查问题
传统日志在查看收集查找上都面临这巨大的困难，需要耗费大量时间，使用cloud logging简化了这一步骤，让运维变得不再困难，极大的缩短了问题排查时间，降低损失。
2、Google 成效
慧博云通通过AB测试了解用户喜好，帮助应用留存率提升20%
通过推送用户偏好的产品，扩大用户基础，并让互动率成长了一倍
与Google Cloud的生态系统无缝整合，建立更完整的数据组，以了解顾客需求
基于BigQuery和Dataflow提供的数据，优化加载逻辑，提升广告点击率达20%
