百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

京东商城,超大型电商系统架构设计原则与实践!

cac55 2024-12-28 11:39 32 浏览 0 评论

京东商城系统,融合了自营模式、商城模式、三方平台等模式,跟淘宝、天猫以商城模式为主的电商系统相比,业务模式上要丰富很多,包括许多WMS、TMS、OMS的部分。国内中小型电商公司,如果要学,最好是学习京东的业务架构,因为业务模式上相近一些。

01

超大型电商系统架构目标

1.构建超大型电商交易平台,兼顾效率和性能,达到高人效、高时效和低成本的目标。

2.低成本,增加服务的重用性,提高开发效率,降低人力成本;利用成熟开源技术,降低软硬件成本;利用虚拟化技术,减少服务器成本。

3.高扩展,系统架构简单清晰,应用系统间耦合低,容易水平扩展,业务功能增改方便快捷。

4.高可用,自动化运维。整体系统可用性99.99%,单个系统可用性99.999%。全年故障时间整个系统不超过50分钟,单个系统故障不超过5分钟。

02

京东商城业务架构设计原则

1.业务平台化

业务平台化,相互独立。如交易平台、仓储平台、物流平台、支付平台、广告平台等 。基础业务下沉,可复用。如用户、商品、类目、促销、时效等。

2.核心业务、非核心业务分离

电商核心业务与非核心业务分离,核心业务精简(利于稳定),非核心业务多样化。如,主交易服务、通用交易服务 。

3.区分主流程、辅流程

分清哪些是电商的主流程。运行时,优先保证主流程的顺利完成,辅流程可以采用后台异步的方式。避免辅流程的失败导致主流程的回滚。如,下单时,同步调用快照,异步通知台账、发票 。

4.隔离不同类型的业务

交易业务是签订买家和卖家之间的交易合同,需要优先保证高可用性,让用户能快速下单,履约业务对可用性没有太高要求,可以优先保证一致性 ,闪购业务对高并发要求很高,应该跟普通业务隔离。

京东电商系统-业务架构图 (来源于@京东技术部)

京东业务架构实例:基础业务下沉 (来源于@京东技术部)

03

应用架构设计原则

1、稳定性原则

一切以稳定为中心;架构尽可能简单、清晰;不过度设计。

2、接耦/拆分

稳定部分与易变部门分离;核心业务与非核心业务分离;电商主流程与辅流程分离;应用与数据分离;服务与实现细节分离。

3、抽象化

应用抽象化:应用只依赖服务抽象,不依赖服务实现细节、位置。

数据库抽象化:应用只依赖逻辑数据库,不需要关心物理库的位置和分片。

服务器抽象化:应用虚拟化部署,不需要关心实体机配置,动态调配资源。

4、松耦合。

跨域调用异步化,不同业务域之间尽量异步接耦。

非核心业务尽量异步化,核心和非核心业务之间,尽量异步接耦。

5、容错设计。

服务自治:服务能彼此独立修改、部署、发布和管理。避免引发连锁反应。

集群容错:应用系统集群,避免单点。

多机房容灾:多机房部署,多活。

04

京东商城应用架构分层

表现层。包含首页、列表页、详情页。

业务流程层。商品系统、交易系统、订单系统、财务系统、物流系统等。

服务层,服务构建层,其中包含:商品服务、交易服务、订单服务、财务服务、物流服务。

在治理方面,包括服务质量层、数据架构层、治理层等。

京东应用架构分层 (来源于@京东技术部)

05

京东商城应用架构拆分原则

1、水平扩展。也就是复制的能力,应用系统实现多机集群、提升并发能力,数据库进行读写分离,如商品读库、商品写库。

2、垂直拆分。指的是不同业务系统的拆分,如商品系统、交易系统;数据库方面也是相应拆成商品库、订单库。

3、业务分片。同业务进行分片,比如秒杀系统、常规下单系统,要分开;数据库方面,如把订单表按ID取模运算后分库分表。

4、水平拆分。服务层面,功能与非功能分开,稳定业务与易变业务分开;数据库方面,冷热数据分离、历史数据分离。

06

京东商城服务设计的依赖原则

1、依赖稳定的部分。稳定部分不依赖易变的部分、易变的部分可以依赖稳定的部分、坚决避免循环依赖。

2、跨域弱依赖。跨业务域调用的时候,尽可能异步弱依赖。

3、基于服务依赖。基于服务不能向上依赖流程服务;组合服务、流程服务可以向下依赖基本服务。条件是基本服务要稳定。

4、非功能性服务依赖。非功能性服务不能依赖功能性服务;功能性服务可依赖非功能性服务。条件:非功能性服务稳定。

5、平台服务依赖。平台服务不依赖上层应用;上层应用可依赖平台服务;条件:平台服务稳定。

6、核心服务依赖。核心服务不依赖非核心服务;非核心服务可依赖核心服务;条件:核心服务稳定。

07

服务设计基本原则

1、无状态。尽量不要把状态数据保存在本机,接口调用幂等性。

2、可复用。复用颗粒度是有业务逻辑的抽象服务,不是服务实现细节。服务引用只依赖于服务抽象。

3、松耦合。跨业务调用,尽可能异步解耦。必须同步调用时,设置超时和队列大小。相对稳定的基本服务与易变流程服务分层。

4、可治理。制定服务契约、服务可降级、服务可限流、服务可开关、服务可监控、白名单机制。


京东商城应用架构实例图 (来源于@京东技术部)

08

京东商城数据架构设计原则

1、统一数据视图。保证数据的及时性,一致性、准确性、完整性。

2、数据、应用分离。应用系统只依赖逻辑数据库;应用系统不直接访问其它宿主数据库,只能通过服务访问。

3、数据异构。源数据和目标数据内容相同时,做索引异构,如商品库不同维度。内容不同时,做数据库异构,如订单买家库和卖家库。

4、数据读写分离。访问量大的数据库做读写分离,数据量大的数据库做分库,不同业务域数据库做分区隔离,重要数据配置备库。

5、用Mysql等主流数据库。除成本因素外,Mysql数据库扩展能力强,运维积累了大量丰富经验。

6、合理使用缓存。数据库有能力支撑时,尽量不要引入缓存。合理利用缓存做容灾。

(来源于@京东技术部)

(来源于@京东技术部)

09

京东商城技术架构总览

1、基本平台。数据存取方面的技术组件包括:缓存服务有JFS/Jimstore、图片服务JSS、即时服务JDW、索引服务Search、数据库服务DBS。

2、集成层。服务流程引擎PAF、服务中间件SAF、MQ服务JDMQ、数据库中间件JDAL、调度服务JDWorker、业务规则服务JDRules、配置服务JDCenter、推送服务JMP。

3、质量层。监控服务UMP、日志服务Loghub、风控系统JDriskM、应用管理jdcenter。

其它还包括治理层、虚拟平台、运营管理等等。

(来源于@京东技术部)

10

京东商城系统运维原则

1、可监控。服务的TPS和RT是否符合SLA,是否出现超预期流量。

2、应用可回滚,功能可降级。应用出现问题时,要求能回滚到上一版本,或做功能降级。

3、在线扩容。超预期流量时,应用系统可选择在线水平扩展。

4、安全保证。确保系统和保密性和完整性。具有足够的防攻击能力。

5、可容错性。核心应用要求多活,避免单点设计,并且自身有容错和修复能力。故障恢复时间短。

6、可故障转移。多机房部署,发生故障时能及时切换。


(来源于@京东技术部)

以上跟大家分享了京东商城业务架构、技术架构、数据架构,以及架构原则、运维原则。

作者:K,知名电商公司技术老K级人物。文出过畅销书,武做过CTO,若不是生活所迫,谁愿意一身才华。

相关推荐

Linux服务器被黑客入侵后各排查项及排除步骤

Linux入侵排查0x00前言当企业发生黑客入侵、系统崩溃或其它影响业务正常运行的安全事件时,急需第一时间进行处理,使企业的网络信息系统在最短时间内恢复正常工作,进一步查找入侵来源,还原入侵事故...

[常用工具] Python视频处理库VidGear使用指北

VidGear是一个高性能的Python视频处理库,它在预载多个专业视频图像处理库的基础上,如OpenCV、FFmpeg、ZeroMQ、picamera、starlette、yt_dlp、pyscre...

微信公众号自动回复及多客服功能实现

目录前期准备1、微信公众平台基本设置2、开发所需参数功能步骤1、填写服务器配置2、验证服务器地址的有效性3、依据接口文档实现业务逻辑具体实现1、微信接入2、自定义回复及多客服接入默认微信公众平台对公众...

电脑病毒怎么彻底清理?这3个方法可以解决!

案例:电脑中毒无法正常使用怎么办?怎么清理电脑病毒?如何彻底清除病毒?有没有小伙伴知道解决的方法?在使用电脑的过程中,我们经常会遇到电脑中病毒的情况,它们能够通过各种渠道感染你的计算机系统,给你带来许...

人在低谷落难的时候,一定要记住的4句话

凌晨三点在便利店啃面包时,我看见邻座大哥对着手机里的存款余额发呆,手指在屏幕上划了又划——原来成年人的崩溃,真的会藏在每个看似普通的深夜里。如果你也正在经历「人生断电期」,这10句从谷底爬起来的人总结...

Linux环境Docker容器安装与使用(六)——安装Hadoop大数据集群

简介:Hadoop是一种分析和处理大数据的软件平台,是Appach开源软件的一个架构,在大量计算机组成的集群当中实现了对于海量的数据进行的分布式计算。Hadoop框架最核心的设计就是HDFS和MapR...

(2023年最新)50个超实用电脑实用快捷键,提高操作效率10倍!

我们现在大多数工作都需要使用电脑,掌握简单的电脑知识,可以更好的提高操作效率,熟能生巧是没错,但还有一个方法就是使用快捷键。办公室文员必备技能知识;基本要求:打字快,会office办公软件(word文...

升级WIN10毛病多?解决这些问题,轻松应对!

1、win10网络不稳定①打开设置,进入网络和INTERNET。②在“WLAN页面”选择“管理Wi-Fi设置”。③在此页面上有个管理已知网络,里面记录着之前电脑连接过的无线网络连接,点击“连接名称”,...

史上最贱最贱的电脑病毒!(最致命的电脑病毒)

看了标题,有很多人是充满好奇心进来的,想看看有多贱!我可以郑重的告诉你,贱到你想掐死黑客!下面我给你介绍一下这个病毒是怎么个贱法!因为我亲身体验了一把!前几天我不知道怎么回事,我电脑莫名其妙多了几...

五千字长文全平台笔记软件obsidian同步攻略&图床使用教程

全平台笔记软件obsidianobsidian(黑曜石)是一个全平台的笔记软件,基础笔记功能免费,如果使用官方的同步功能好像是收费(我也不确定,因为我甚至没登陆过obsidian的账号)。可以使用ma...

工业自动化2.0演进:具有自我意识的运动控制

工业自动化领域的下一个发展方向要求机器能够独立调整其性能参数,以完成工厂操作人员分配的任务,或根据生产力增强的人工智能(AI)算法的输入,对机器自身重新配置以优化其行为。具有自我意识的机器的价值在于,...

零信任的时代到来!VPN将逐渐被取代

转自NETWORKWORLD,作者NealWeinberg,蓝色摩卡译,合作站点转载请注明原文译者和出处为超级盾!传统的VPN正在被一种更智能、更安全的网络安全方法所取代,这种方法将每个人都视为不受...

电脑键盘指法+常用快捷键文字及图片详解

图1:20190820(整理)(较全面的在后面)Ctrl+N:新建文档F4:重复上述操作Esc:取消当前操作HOME:光标跳转行首END:光标跳转到行尾WIN+L:锁定桌面WIN+E:开启磁...

VPN正在消亡,零信任万岁

转自NETWORKWORLD,作者NealWeinberg,蓝色摩卡译,合作站点转载请注明原文译者和出处为超级盾!传统的VPN正在被一种更智能、更安全的网络安全方法所取代,这种方法将每个人都视为不受...

Windows自带的「黑科技」工具,能让你少装10个软件!

电脑装了一堆软件,桌面却还是乱糟糟?其实Windows系统里藏着一堆“神器”,无需第三方工具就能搞定截图、录屏、OCR文字提取、系统加速……这7个冷门但逆天的内置工具,专治“软件成瘾症”,看完立马卸载...

取消回复欢迎 发表评论: