2018IT价值峰会—分布式架构在金融行业的实践-华锐CEO邹胜

分布式架构在金融行业的实践——用分布式架构重构金融核心业务平台华锐金融技术CEO邹胜从CIO转型为CEO我的CIO经历25年深交所从业经历，从工程师到CIO创业前任深交所副总经理、深证通董事长管理超过700人技术团队带领深交所技术团队自主研发了世界级的第五代核心交易平台保持深交所整体技术能力长期居于行业首位我主导的分布式转型——第五代核心交易平台采用消息驱动的高性能分布式架构，使用200台X86标准服务器支撑全球规模最大的个人投资者市场及其交易需求(WFE2016,2017)系统承载的投资者账户数3亿日成交笔数3亿笔，日处理委托数4亿笔上市证券数5万只，事前风险控制5000万条记录每秒并发处理30万笔交易每笔交易时延1.1毫秒主备中心采用最高标准的零数据丢失设计延续16年全球交易所领先的安全运行记录5年总拥有成本大幅降低至1/3完全自主研发，自主掌控能力显著增强投产26月运行平稳，今年获得证券行业科技进步一等奖第五代核心交易平台价值STSV5价值全业务单一平台可水平扩展卓越的性能高可用高可靠高性价比自主掌控能力可持续创新转型CEO现任华锐金融技术CEO，带领华锐用不到2年时间进入证券行业核心业务领域，成为证券行业技术市场上的重要竞争者独立金融软件供应商，专注于为金融行业提供下一代分布式核心基础技术2位深圳市领军人才，研发人员近90%拥有1个分布式系统基础平台（高性能分布式中间件）、4个证券核心应用平台、11项软件著作权、4项分布式技术专利（申请中）、行业唯一的分布式技术实验室已完成深创投5000万元战略投资分布式技术平台解决方案能力在行业处于第一位置，客户包括多家顶级金融机构部分客户华锐做什么核心交易和实时风控平台云计算分布式系统基础平台分布式中间件金融行业技术趋势下一代金融交易技术发生重大变革，分布式架构成为全球主流选择转型重构高速网络服务器，应用一服务器，应用三备主服务器，应用二备主服务器，应用四数据库主机应用一应用二应用三应用四集中式架构分布式架构集中式交易技术分布式交易技术重大改变技术特点大型机/小型机+数据库+集中存储标准服务器+高速网络+消息总线垂直升级变为水平扩展交易速度35ms~140ms10µs~1.1ms快100+倍处理能力3000~70000tps50000~1000000tps提高10+倍可靠性单活高可用，分钟级切换，数据分钟级丢失双活高可用，秒级切换，数据零丢失大幅提高技术来源和可控性单一设备供应商，封闭平台多个设备供应商，开放平台客户自主可控能力大幅提高技术趋势下一代金融交易技术带来的重大改变商业价值下一代分布式金融交易技术带来的商业变化总拥有成本应用软件成本硬件和基础软件成本（3000+万元）总拥有成本应用软件成本硬件和基础软件成本（1亿元）大幅降低显著降低高性能分布式技术——证券行业可用领域高性能分布式技术交易所交易证券公司交易执行行情分发交易总线策略交易算法引擎量化交易实时风控AMI用于AI在关键生产环境构建大规模机器学习数据管道变得更简单分析模型的构建和服务之间不再耦合既可实时处理也可批处理分析模型可以部署到高性能、可伸缩的任务关键环境里AMIProductionMLAppModelBuilding(Hadoop/Spark…)AppDBDBDBAppOutputTrainingDataModelParamsModelParamsFeaturesFeatureDataInput与华为战略合作服务金融业ArchForce：架构的力量A：AvailableR：ReliableC：ConsistencyH：Highperformance华锐金融技术：中国金融技术的新兴力量分布式系统基础平台AMI——让分布式更简单AMI由动态库（DLL）及分布式服务（Service）组成AMI动态库提供可靠消息传输及高可用功能，提供开发库及便利的API接口用于构建系统AMI分布式服务提供集中监控、集中配置、仲裁、跨网段数据传输、时延分析等功能，同时提供windows应用适配接口AMI架构AMIApplicationADKLinuxWindowsX86PCServerReliableMessagingHighAvailableAPIC/C++JavaPythonABFFrameworkAAFFrameworkDomainServerBridgeServiceLatencyAnalyzerConnector平台级能力——高可用关键应用（主）主数据中心关键应用（备）灾备数据中心关键应用（备）高可用特点：支持多中心多活部署容错能力强（RPO=0）故障自动切换（秒级RTO）业务无关（高可用设计与业务解耦）整体可用性效果超越主机系统高可用功能：可靠传输、全局排序、数据持久化、仲裁器副本故障切换、集群整体故障恢复、故障隔离、故障副本再加入关键应用（备）多活故障自动切换平台级能力——高并发13.3120.6521.6122.6731.9841.2947.5052.67010203040506005000001000000150000020000002500000单位：US单位：MSGS/SThroughputinSingletonScenario5.685.696.242451620us10us20us30us40us50us60us70us10000msgs/s100000msgs/s300000msgs/s10000msgs/s100000msgs/s300000msgs/sLatencyinSingletonScenarioLatencyinHighAvailableScenario平台级能力——低时延平台级能力平台级架构能力高可用高并发低时延水平扩展开发难度可控分布式技术实验室分布式技术研究分布式基础技术研究和技术架构顾问咨询研发新一代分布式中间件开放、创新、高效、可靠、经济的分布式技术解决方案创新技术及硬件设备引入和测试提供证券行业测试基准提供完备测试环境构建证券行业高可用、高并发、低时延、水平扩展测试基准分布式技术联盟分布式高性能计算技术培训组织技术沙龙，运营技术社群分布式技术实验室•分布式系统咨询规划、技术架构设计顾问、关键技术验证、设计开发、技术培训等服务•高性能计算性能调优服务•性能和可用性基准测试服务•10GB-100GB低时延网络（以太网和Infiniband）•高性能计算设备、超融合设备•高可用网络架构和高可用测试环境•30km光纤模拟同城双活测试环境•深圳上海异地灾备测试环境•微秒级时钟同步校准工具•精确时延度量和性能测试工具•模拟撮合工具•沪深交易所L1/L2测试行情，仿真测试环境•金融云测试环境•实验室测试环境•实验室服务分布式技术实验室合作伙伴深圳市福田区金融科技青年人才培训基地产品和服务分布式系统基础平台AMI转型咨询、规划、培训、设计、验证测试和实施服务高速行情平台AMD实时风控平台ARC产品核心交易平台ATP分布式技术实验室ADTLPAAS服务SAAS服务服务高速交易总线ATH定制网关订单管理系统订单管理系统运营/运维人员交易总线AMI上交所网关外部系统标准网关AGW数据交换服务DXS运营运维管理BOS交易引擎TE查询引擎QE算法引擎AE报盘服务ORS深交所网关行情网关行情数据服务MDD实时清算引擎CE核心交易平台ATP(ArchforceTradingPlatform)交易总线AMI监控设置•统一日志模型设置•系统监控与告警机制设置•操作账号与身份认证•股东账号登陆认证•定时任务调度设置•系统提示信息设置公共服务框架数据管理•数据及数据库管理•数据持久化•历史数据管理操作设置•日常运维操作管理•安装部署管理•操作权限管理•非消息型接口管理•操作页面框架设置交易服务引擎成交回报交易所接收委托订单构造订单检查报盘港股通交易转托管要约收购网络投票权证行权...现货集中竞价交易网上发行认购开放式基金申购赎回大宗交易盘后定价交易债券质押式协议回购盘后定价交易核心交易平台ATP(ArchforceTradingPlatform)ATP性能（全路径、高可用）186.91173.35190.15211.24218.49235.960.0050.00100.00150.00200.00250.00TPS200TPS1000TPS2000TPS5000TPS8000TPS10000单位：微秒委托数/秒深交所报盘上行时延G1O6p分布式架构在证券行业的实践金融机构需要的数字化能力可靠、可扩展、自动化的常规应用高可靠、可伸缩的基础设施坚固、灵活、可扩展的企业架构平台灵活、可迅速引入的创新型应用新技术的消化吸收能力差异化、创造业务价值的能力无缝整合的集成能力观点没有好的企业架构平台，IT就是买来的一堆孤立的系统。有了好的企业架构平台，就可以构建一个有序、生机勃勃、可持续发展的内部生态环境，业务和数据在企业内无障碍流动，不断产出好的创新服务，支撑业务持续纵深发展，就可以“要风得风，要雨得雨”。国内证券公司IT能力的不足核心应用和关键技术的研发能力大部分将研发能力集中投入在前端，中后台的核心技术掌握薄弱平台化能力大部分选择购买各类应用系统，平台能力和架构能力非常欠缺差异化能力同质化现象严重，自主研发、差异化的能力非常欠缺行业困局同质化生态封闭创新不足门槛很高供给不足购买为主核心应用关键技术华锐之道——授人以鱼+授人以渔中间件、业务框架：AMI高可用、高并发、低时延、水平扩展开放API、开发框架、逐步开放源代码开放、共创、开发者社区/联盟合作伙伴：客户研发团队、开放平台和低时延设备厂家个性化、差异化业务，体现业务价值客户自主管理或开发合作伙伴：客户研发团队、客户外包团队标准业务功能模块：AMD、ATP、ARC、ATH产品化、组件化、松耦合、服务化、支持行业标准开放API和业务框架给客户合伙伙伴：客户研发团队分布式转型赋能三部曲架构验证分布式架构关键技术验证•验证架构•培训客户团队•开发原型系统小型生产系统用分布式架构重构核心业务，上线小型生产系统•机构交易系统•智能交易（算法/策略）系统•做市系统大型生产系统用分布式架构重构核心业务，上线大型生产系统•核心交易平台•实时风控平台•高速行情平台分布式系统基础平台高速信息分发金融交易全局实时风控智能交易保险核心银行资产管理扩展到金融行业关键应用领域外汇支付金融云PAASSAAS华锐金融技术提升金融基础设施能力丰富的应用场景坚实的技术平台优秀的客户群体充足的资本支持致谢