Azure 数据处理指引
简介
Azure 的服务用订阅区分不同部门的费用。数据由数据工程师从数据源(各数据库等)导出。
Azure 数据存储服务
Azure 数据处理服务
商业分析有以下几种,Azure Synapse Analytics 可加速描述性分析,一般生成 BI 报告。
数据存储
不同分类的数据需要考虑不同存储需求。
数据分类
半结构化数据语言
XML 用元素和属性两种 tag 定义数据结构,太冗长。JSON 用花括号定义数据结构,常用于返回数据。YAML 用换行、缩进定义数据结构。
Azure Storage
Azure Storage 在 Azure Resource Group 中。Storage 设置值 Storage 账号层面有效,需要不同设置的 Storage,就需要不同的 Storage 账号。配置虚拟网络后能让 Storage 内容仅在虚拟网络中传播。
数据处理
分工
事务
事务需满足 ACID 保证。