大数据时代的 金融技术变革 程立 (鲁肃) 蚂蚁金服
金融服务的趋势与技术挑战 大数据驱动的金融金融级开放移动平台 高并发金融交易 业务 亿级 用户 30 PB 3 万笔支付 / 秒 日处理数据 千万 笔支付/天 云计算上的金融业务 实时大数据的风控 毫秒级 30 分钟 亿级 实时数据闭环 账户清算能力
“传统”的金融技术架构 数据中心 金融级 渠道 • 强一致 • 准确性 产品 • 高可靠 联机交易主机 数据分析主机 • 高可用 联机数据联机批量 分析 挖掘 交易 交易 • 安全性 ETL DM 交易中间件 • 实时性 DW DB ODS 数据中心 数据中心 (异地容灾) (同城容灾)
金融交易技术发展的重点 分布服务与数据 万级/秒业务交易 弹性供给与调度 分布事务与协调 极低交易成本 强一致性保证 金融级 交易技术 实时服务质量管控强一致秒级容灾 亚秒级服务保证 %+
作为云服务的金融交易平台 … 金融业务SAAS 核心数据 业务引擎 信息标准 风险管控 运营支撑 金融级PAAS与中间件 分布服务 分布事务 分布调度 实时监控 弹性管控 金融级数据库 关系数据库 NoSQL数据库 实时分析 其它 金融级基础设施 计算 存储 网络 安全 容灾
阿里金融云计算 银行,基金,保险,证券 金融行业合作伙伴 金融增值服务 专线VPN接入 异地灾难备份 护航保障 数据保密 安全及合规 云计算服务 弹性计算服务 负载均衡服务 关系型数据库服务 云盾 云监控 (ECS) (SLB) (RDS) 分布式文件系统 任务调度 Distributed File System Job Scheduling 资源管理 安全管理 远程过程调用 分布协同服务 Resource Management Security Management Remote Procedure Call D- Coordination Service 大规模分布式云操作系统(飞天) 大规模分布式云操作系统(飞天) Linux 生产集群 同城灾备集群 异地灾备集群 集群部署 Deployment 集群监控 Monitoring
支付宝金融中间件与PAAS平台 PaaS平台 研发服务 应用服务 大数据服务 运维服务 弹性服务 • 代码管理 • 语言 • 数据开发平台 • 日志监控 • 硬件/网络/存储 • 持续集成 • 应用容器 • 数据管理平台 • 故障切换 • 容量管理 • 研发平台 • 数据持久化 • 数据工作平台 • 异地灾备/多活 • 弹性伸缩 • 服务治理 • Rpc,消息 • 安全 • 自动化 云产品能力(金融增强版) 分布式数据应用容器 研发管理 大数据处理 通讯平台 监控平台 治理平台 管控平台 与事务 阿里金融云计算(IAAS)
OceanBase分布式金融级数据库 MergeServer ChunkServer MergeServer MergeServer ChunkServer ChunkServer Update Root Server Server MergeServer MergeServer ChunkServer ChunkServer MergeServer ChunkServer MergeServer MergeServer ChunkServer ChunkServer MergeServer MergeServer MergeServer MergeServer ChunkServer ChunkServer ChunkServer ChunkServer Root Update Update Root Server Server Server Server MergeServer MergeServer MergeServer MergeServer ChunkServer ChunkServer ChunkServer ChunkServer MergeServer MergeServer ChunkServer ChunkServer
大数据对金融的意义 数据业务 EB 业务运营 实时 PB 决策支持 业务报表 TB T+1
数据业务案例:实时风险控制 事件收集 交易或登规则 录请求 模型 实时计算 数据 授权交易或低风险 交易成功 安全 风险 服务 识别 安全 高风险 正常行为 身份 终端 支撑模型在全量验证挑战 认证 管理 数据中的训练和事件回放 需要核查 欺诈行为 离线计算平台
数据业务案例:小微贷款
作为云服务的大数据平台 … 数据采集 数据服务 记录采集 消息采集 日志采集 订阅 查询 数据服务 数据路由 数数据据实时计算离线计算 交开换发流计算 实时分析 MR Graph MPI 与与融治合理数据存储
支付宝的金融大数据技术平台 数据整合 信息加工、存储与管理 信息应用与消费 金融云 阿里云ODPS RDS 门 清洗转换 户 OSS 集 成 应用 ECS 维度建模 报表展示 , 数 … 即席查询 安 据 数据分析 全 OLAP 同 挖掘预测 访 步 其他数据库 问 数据挖掘 控 人员 文件 制 …
综合案例:云上的“余额宝” 支付宝实时调用 支付宝文件交换 负载均衡SLB 文件服务器ECS 云 安 全 实时交易集群 批量清算集群 数据库集群 云 ODPS大数据集群 监 控 主数据中心 同城数据中心 异地容灾数据中心
小结 • 金融云是必然趋势: – 金融级云计算基础设施(IAAS) – 金融级分布式数据库 – 金融级中间件平台(PAAS) – 金融级大数据处理技术 – 无限伸缩、持续可用的金融系统架构 • 蚂蚁金服、阿里云与合作伙伴一起,通过小微金融服务,沉淀并验证了金融云的可行性与实现
NEXT • 蚂蚁金服的金融云技术开放时间表: – 金融中间件与PAAS平台 @ 2015Q1 – 金融大数据技术平台 @2015Q1 – 金融级分布数据库OceanBase @2015下半年 • 金融云上的完整银行系统 • 基于金融云的中小银行公共服务平台 • 新的金融信息与服务标准 • 生物识别将带来金融安全技术与体验的突破 • 越来越多的纯数据、纯网络金融业务创新 • 人人、时时、处处享受个性化的金融服务
合作、共创、共赢