数据湖仓技术

致力于帮助企业构建数据湖，推动企业数字化转型

比孚科技作为Amazon高级咨询合作伙伴，致力于帮助企业构建数据湖，实现核心流程数字化、自助式商业智能（Business Intelligence)、 BI移动化等服务，推动企业数字化转型。

数据湖服务

接入数据源类型

结构化数据、非结构化数据、企业内部数据、企业外部数据、批次数据、实时数据等；
包含但不仅限于以下数据源：ERP(SAP/Oracle ERP)、CRM(Salesforce/Microsoft Dynamics 365)、APP(Weixin/TalkingData)、图像语音。

接入方式

可通过互联网公开网络、虚拟专用网络(VPN)、Amazon直连专线(Direct Connect)等方式完成云上和线下的网络连通。
使用数据库迁移服务（DMS）、Lambda、Kinesis、CLI等组件完成数据上云；使用Talend、Informatica、Kettle、Data Pipeline等第三方产品完成数据上云。

批处理

利用Redshift完成结构化数据的SQL处理；利用EMR Spark等完成结构化、非结构化的批数据处理；
利用EC2搭建第三方处理平台Airflow、MapR、Hadoop、Informatica等完成结构化、非结构化的批数据处理。

实时处理

利用Kinesis、EMR Spark Streaming、Lambda、SQS等Amazon服务完成实时数据处理；
利用搭建在EC2的第三方处理平台Kafka、Rabbit MQ等完成实时数据处理。

机器学习/人工智能

利用SageMaker、Rekognition、Lex等Amazon服务完成机器学习/人工智能；
利用搭建在EC2的第三方处理平台TensorFlow、Keras、MXNet、PyTorch等完成机器学习/人工智能。

数据应用服务

使用QuickSight、Tableau、PowerBI、FineReport、FineBI等展示工具对接Athena、ElasticSearch、Redshift、EMR、Kylin等组件完成数据应用服务的提供。

平台安全及监控

使用VPC、IAM、KMS、CloudTrial、CloudWatch等组件完成平台安全及监控。

比孚大数据湖解决方案

数据湖常用服务

项目实施方法论

Amazon服务

Amazon供应的集成服务套件可提供快速而轻松地构建和管理数据湖以进行分析所需的每个要素。Amazon支持的数据湖可以采用传统数据孤岛和数据仓库无法胜任的方法，处理组合不同类型的数据和分析方法以获得更深层次的见解所必需的扩展性、敏捷性和灵活性。Amazon为客户提供最广泛的分析阵列和机器学习服务，以轻松访问所有相关数据，而不会妨碍安全性或监管。

技术能力

比孚作为Amazon Partner Network(APN) 高级 (Adva nced Tier) 咨询合作伙伴，致力以云技术为企业数字化转型赋能。拥有诸多通过Amazon认证的技术人员，对Amazon服务的特点有着深刻的理解。

丰富的行业经验

比孚团队成员来自多家国际知名咨询和信息技术服务公司，在管理与技术领域拥有丰富经验。通过给细分行业龙头企业的服务，不断积累行业经验。框架化的业务成果积累，可以帮助团队成员快速了解行业。团队成员整体丰富的行业经验，可以帮助客户快速找到技术和业务平衡点，帮助客户进行业务基于数据湖上的落地。