来SACC2019共论“数字转型 架构演进”之道
SACC一直紧跟系统架构关键技术热点,成为架构师、CTO、CIO以及各研发人员学习交流的前沿阵地。
2019已经过半,第十一届中国系统架构师大会SACC2019的脚步也越来越近了,十年来中国系统架构师大会SACC一直紧跟系统架构关键技术热点,成为架构师、CTO、CIO以及各研发人员学习交流的前沿阵地,也成为程序员向架构师进阶路上的良师益友。
为了使SACC2019保持一贯的高水准,会前我们对纷繁复杂的技术做了调研,在专家的帮助下找出了当前架构领域的关键技术热点。
高可用业务架构设计
高可用是一个主观性较强的相对概念,不同的人有不同的见解。如今业务需要快速变化应对市场的激烈竞争,更多的是业务驱动IT变革,很多技术专家都强调技术已经融入业务的方方面面。不同以往,架构设计不能只从系统结构考虑问题,高可用不再是局限于某个系统,应该从业务角度出发,全方位考虑面向业务的高可用架构设计,让业务不间断对外提供服务。
分布式存储
在万物互联的时代,数据的价值越发凸显,机遇与挑战并存。而对于数据存储来说,面临着海量数据高并发应用场景的挑战,需要解决数据存储更多、更快、更稳定以及长期保存的需求。分布式存储相对于传统集中式存储具有高性能、弹性可扩展、稳定性等优点,在价格方面也更有优势。虽然在某些高端存储应用场景,传统集中式存储依然具有独特优势,但分布式存储的发展势不可挡。
数据架构设计
数据架构与技术架构、业务架构构成了企业架构,三者需要相辅相成。随着大数据时代数据价值不断凸显,数据架构越来越受到企业重视,目前数据面临高并发的挑战。数据架构需要变革,不论是大数据架构还是数据库架构,都要与时俱进,满足横向可扩展、高度解耦,要有足够的灵活支持多种业务需求。
大数据平台设计与大数据应用
大数据平台是企业大数据的底子,要想发展好底子要打牢,其演进会遇到很多问题,比如随着集群数量和规模不断变大,会遇到运维、调优、性能、高可用等方面的挑战,也有企业在尝试建设应用集群从而使灵活性更高。而大数据应用已经有了很多不错的落地,比如在应急管理平台的防灾预测,在滴滴出行的接送匹配,在工程方面对泵车的检修预警等。
企业中台架构设计
今年一股“中台热”席卷中国企业级市场,大多数人认为中台的出现是为了可以更好服务前台的规模化创新,可以更及时响应业务的需求,企业要有灵活的小前台,丰富的大中台和稳定的后台支撑。而中台与平台、PaaS之间的差异也是不少企业心头之问,数据中台、业务中台的双中台怎样配合,如何有效避免重复造轮子,都需要企业去探索。
基于大数据的人工智能应用实践
人工智能的发展离不开数据、算法和算力,大数据的发展为人工智能提供了数据基础,现在结合场景有了越来越多的落地实践。比如智能外呼机器人替代或者辅助传统的呼叫中心,OCR帮助外勤人员智能巡店陈列商品,实现精准营销智能推荐的千人千面等,为企业降低了成本提升了效率。不过总体来看人工智能目前还处在能听会读阶段,在语义理解以及情绪感知等方面有待突破,而如何与场景更有效结合也是不小的挑战。
微服务与云原生架构
企业 IT 面临着高并发、超大规模快速迭代更新等挑战,需要更高的弹性和敏捷性。IT也在向微服务、云原生架构转型,解放架构自由度,最大化业务敏捷性。很多企业在进行微服务化改造让业务更敏捷,而云原生的核心是弹性,支持多租户和横向扩展,都为企业应对新时期的挑战提供了有效的帮助。微服务和云原生架构不再是高冷的词汇,逐渐飞入寻常企业。
10月31日~11月2日,由 IT168 旗下 ITPUB 企业社区平台主办的第十一届中国系统架构师大会SACC2019将在北京举行,本届大会以“数字转型 架构演进”为主题,继续沿用四大主线并行的演讲模式,设置业务系统架构设计、大数据平台架构设计、数字化转型实践和开源架构设计四大主线,共1个主会场,20个技术专场,100+来自互联网、金融、制造业、电商等领域嘉宾,将为广大参会者提供一场最具价值的技术交流盛会。
目前已经确定滴滴出行高级副总裁章文嵩、网易杭州研究院执行院长汪源、腾讯数据平台部总经理蒋杰、京东商城技术副总裁刘海锋、快狗打车(原58速运)CTO沈剑、同程艺龙副总裁、研发中心负责人余沛、白山云联合创始人兼 CTO童剑、百度大数据主任架构师马如悦、知乎合伙人高级副总裁李大海、好买财富平台架构部技术总监王晔倞组成的大会顾问委员会为大会进行技术把关。贝壳金服 2B2CCTO史海峰、滴滴出行大数据平台负责人罗李、腾讯云架构平台部副总监程彬、京东数科研发支持负责人唐洪山、美团点评-到家事业群研究员&美团配送后台技术负责人宋斌等17位技术专家将为大会提供技术支持。
蚂蚁金服高级技术专家赵裕众(花名陈群)、网易猛犸大数据平台负责人郭忆、滴滴出行大数据运维保障负责人江裕城、互联网架构技术专家快狗打车(原58速运)CTO沈剑、58同城AILab负责人詹坤林、腾讯音乐全民K歌UGC业务负责人黄浩、转转首席架构师&技术委员会主席孙玄、京东物流高级算法工程师邓克捷等几十位专家已经确认参加主题演讲,其中,沈剑将为大会带来3个小时的演讲,系统讲解数据库架构设计,精彩不容错过。
部分大会亮点呈现:
一、深入数据架构,整体架构设计
1、一次搞定数据库架构设计。在如今的数字化时代,数据实时在线、高容量、大并发面临着挑战,数据库需要迭代升级。数据库架构设计也存在诸多难点,如果能有专家系统性地讲解数据库架构那是再好不过了。
在“专场 9:数据架构设计”,互联网架构技术专家快狗打车(原58速运)CTO沈剑将带来3个小时的实践经验,如果你所在的单位已经完成了数据库架构设计,也能通过本次深入的讲解,进行对比与经验总结。
2、全民K歌UGC架构高可用实现。全民K歌拥有6亿用户,DAU高达6000万,用户会产生大量的音频、视频、图片等UGC数据,每天新增存储超过80T,此外,UGC作为用户最核心的数据,活跃用户可能拥有30万条UGC,而普通用户只有几条UGC内容,如何实现变长大列表数据的可靠存储,适配UGC内容的经常变更,并提供高达30万QPS访问,和3个9以上的可用性;另外,音频和MV属于流媒体数据,如何合理的实现流媒体内容的冷热划分,提供最佳的CDM调度和回源策略,在提升用户流媒体播放体验的同时,有效的降低带宽成本,这些都是全民K歌需要面对和解决的技术问题。
在“专场 18:高可用业务架构设计”,腾讯音乐全民K歌UGC业务负责人黄浩将带来全民K歌高可用业务架构的实现路径与经验。
二、分布式技术-分布式存储
1、OceanBase存储系统的架构演进历程及工程实践。作为一款阿里巴巴和蚂蚁金服自研的分布式数据库,OceanBase历经了近10年的发展历程。近10年来OceanBase的存储架构经历了多次演进,以解决业务越来越复杂苛刻的存储需求。而对于分布式存储来说,难点在于数据读写的一致性。
在“专场 1:分布式存储(上)”,蚂蚁金服高级技术专家赵裕众(花名陈群)将回顾OceanBase存储架构的演进历程,讨论每一次进化背后的业务与设计考量。
2、春晚摇红包场景下亿级 QPS 存储技术架构。针对百度春晚摇红包活动中 KV 存储的应用, 对亿级 QPS 下面临的技术架构挑战进行分析, 以及说明在架构设计中高性能, 强一致性中如何进行取舍, 同时提出了后续架构上可优化及改进的方向。
在“专场 1:分布式存储(上)”,百度资深研发工程师廖洪流将带来他的实践分享。
三、从自动化到智能化
1、从DevOps到AIOps的转型。从手动运维到DevOps,再到目前AIOps,相信很多企业都在经历着这些转变。翼课网目前正在做的智能化容量管理和智能化故障处理项目,目前其DevOps可以做到代码、配置、数据库上线、执行任务、CDN上线、App上线更新,全平台自动化,开发可自助完成,全程运维不参与。这其中有很多经验、经历、坑、成果可以分享,与此同时仍有一些挑战,比如如何高效、精准、快速的定位线上数据库集群?如何准确的预估容量?也需要更多的探索。
在“专场 13:从DevOps到AIOps(上)”中,技术总监陈永清将分享翼课网从DevOps到AIOps转型的那些经验与坑。
四、云架构、微服务
1、抛砖引玉:Service Mesh在瓜子平台的探索与实践
在“专场14,云原生架构设计与应用实践”,车好多技术部研发效能团队技术总监董彬将带来 Service Mesh 在瓜子二手车的实践。
演讲主要包括:在 K8S 上 通过 sidecar 作为服务发现和注册的架构原理;通过 gRPC Bridge 做服务注册,以及通过 gRPC Proxy 做服务发现的 Sidecar 模式;使用 gRPC gateWay 把 gRPC 转换成 HTTP 调用;CI/CD 把 protobuf 生成多语言代码以及符合 OpenAPI 标准 的 Swagger 文档;车好多自研的 gRPCx 开发框架包含 Golang 和 Java 版本;使用 Kong API 网关代理内网服务间请求和外网客户端请求,把鉴权,安全熔断限流等能力统一托管起来,降低了服务器开发的门槛等。
五、大数据平台设计与应用
1、地图空间大数据计算优化与应用。滴滴出行已经走入普通都市人的生活和工作日常。众所周知,出行场景下的接送驾是整体司乘体验中非常关键的环节,良好的接送驾体验的核心是要给到司乘一个合理的上下车位置,使司机、乘客在尽量低成本的前提下顺利汇合和送达。所以,问题来了,如何结合大数据处理平台和地图数据的特点构建一个强大的位置推荐引擎,盘活海量的用户数据,并支撑高性能的服务访问,为接送驾的推荐产品和策略迭代赋能,是一个很大的挑战。
在“专场 7:基于大数据平台应用实践”,滴滴出行专家工程师李浩将结合接送驾业务场景,介绍滴滴是如何基于大数据平台,构建并优化位置推荐引擎以及其所面对的挑战和思考。
2、PB级ElasticSearch集群架构设计与平台化演进。ElasticSearch的应用一直非常广泛,随着企业ElasticSearch集群数量和规模不断变大,过程中会遇到运维成本高、性能调优困难、高可用难以保障等常见问题。
面对这样的问题每个企业都有自己的应对策略,同程艺龙有可行的应对思路和成功实践,并将之演化成通用服务平台进一步降低接入和使用成本。
在“专场 3:大数据平台架构设计”,同程艺龙研发中心技术专家周祝群将分享同程艺龙ElasticSearch平台的架构设计、部署与调优、监控报警、接入规范以及多数据中心高可用保障等多个方面的思考和实践经验总结。
六、企业中台架构设计
1、网易全链路数据中台建设实践。网易拥有网易考拉、网易严选两个电商平台,而随着网易电商业务的快速增长,数据已经成为驱动业务发展的生命线,每天有数十万张表被加工计算,生产出来数千个指标呈现在各个数据产品中,每天有大量的运营、分析师、管理人员、POP商家基于这些数据产品、报表进行商业决策。随着数据应用规模和业务复杂性的提升,指标计算口径不一致,取数效率低,数据重复建设,大数据投入成本快速增长,数据质量问题频发,导致数据应用效果面临了严重的挑战。
在“专场 12:企业大中台设计与实践”,网易大数据平台负责人郭忆将结合网易考拉数据中台的建设实践,从问题出发,结合解决问题的方法论,分享网易数据中台建设实践。
2、转转大中后台技术架构构建之道。在“专场 12:企业大中台设计与实践”,转转首席架构师,技术委员会主席孙玄将带来转转大中后台技术架构构成、转转大中后台技术架构构建哲学、转转大中后台技术架构实践、转转大中后台技术架构未来思考四点分享。
七、基于大数据的人工智能应用实践
1、AI在陌陌直播内容智能的探索与应用。直播是陌陌社交泛娱乐平台的重要场景,而图像内容则是主播与用户进行互动的核心媒介,如何对直播图像信息进行理解与利用,是持续提升直播用户体验的关键点之一。涉及到违规内容特别是色情等识别、才艺颜值等优质内容识别、海报自动生成等现场感增强方案,过程中会遇到一些困难,陌陌利用技术创新、图像工程应用框架等解决了这些问题。
在“专场 16:人工智能算法与应用实践(上)”,陌陌内容智能团队负责人高龙成将介绍陌陌如何运用AI技术给直播内容做智能升级。
2、智能语音应用助力呼叫中心提高人效和服务质量。呼叫中心是企业销售、客服人员与客户连接的桥梁,AI技术可应用于人工外呼的不同阶段以创造价值:
(1)在人工外呼前期,基于语音识别、NLP和自动对话技术实现的智能外呼机器人可以代替人工与用户自动对话,这可以大大减少人工拨打量,提高整体人效。
(2)在人工外呼结束后,基于语音识别、NLP技术构建的智能质检机器人可以对通话录音进行分析质检,自动发现违规录音,这可以规范化销售和客服工作,提高客户服务质量。
在“专场 20:人工智能算法与应用实践(下)”,58同城AI Lab负责人詹坤林将带来58同城对智能语音的应用,看AI如何助力提高人效和服务质量。
“浪奔浪流,万里涛涛江水永不休”,技术的浪潮也如这江水滔滔不绝,加入我们与弄潮儿共论“数字转型”之道,同看“架构演进”之路。
SACC2019诚邀您的光临,2019年10月31日~11月2日在北京不见不散!
更多精彩详见下方大会议程图
最后,记得关注微信公众号:镁客网(im2maker),更多干货在等你!
硬科技产业媒体
关注技术驱动创新