京东云为企业提供智能化之路


京东云为企业提供智能化之路 朱凌 SACC2017 • 13年间交易额增长9万 倍,年均复合增长率 超过150% • 服务中国9亿多用户和 十几万品牌商 • 联手腾讯打造全球独 有的社交电商新模式 京东集团历年交易额(单位:元) 精选 13万 + 商家入驻 12万 + 正式员工 1199亿 元 2017年618全民年中购物节 累计下单金额 【1】数据统计:行业内主要友商的近似统计方式下京东GMV数据。GMV: Gross Merchandise Volume,商品交易总额。 【2】京东集团2017Q2财报,不包含京东金融。 【3】京东集团2017年618战报 ( 6月1日-18日 ) [1] [2] [3] 869亿 1530亿 3040亿 6067亿 9392亿 2012 2013 2014 2015 2016 [2] SACC2017 • 京东的业务在高速增长 • 十三年复合增长率 150% • 业务复杂度、架构复杂度在不断提升 • 各种新的业务需求,如秒杀、闪购、神券、白条 等等 • 各种新的业务模式:物流、金融等等 • 架构为了支持业务的发展,不断演进。垂直分割, 水平分割,服务化,多中心 • 服务器规模在不断提升 • 高峰低谷差距大 • 硬件采购周期长 • 急需有成熟、稳定、高效的私有云支撑业务发展 • 企业对智能化,大数据的要求越来越高 SACC2017 • 2013年开始研发京东云的资源管理系统 • 2014年全面拥抱docker技术 • 2015年,京东商城一半的实时流量由京东私有云承担 • 2016年,京东商城的全部实时流量由京东私有云承担 • 2017年,京东线上有20万以上的docker,是全世界最大 的docker集群之一 SACC2017 • 全面拥抱云计算,意味着京东的大量数据可以在统一的 平台上存储和计算 • 京东拥有从供应链的全环节数据,这些数据是实现智能 化的金矿 • 2017年,京东大数据平台数据量在400PB以上,每天处 理15PB以上的新数据 SACC2017 无人机 无人车 无人仓 京东无人配送机器人已在人大、清华等高校实现常态化运营 京东无人机已在宿迁、西安等地常态化运营 无人仓智能机器人已在京东多个仓库实现落地运营 SACC2017 多终端消费 多终端 PC、手机、冰箱、音箱、AR/VR…… SACC2017 图片审核 SACC2017 文字识别 SACC2017 人脸识别 • 门禁打卡 • 访客登记 • 会议室预定 SACC2017 京东公有云:对外输出技术的窗口 • 提供了各个层次的服务 • IaaS:虚拟网络、主机、容器、存储、CDN • PaaS:数据库、缓存、视频、大数据平台、人工智能 • SaaS:品牌电商、B2B、B2C • 京东集团各个业务线能力的输出: • 物流云、营销云、供应链、电商平台 • 从Openstack到自研云计算平台的过渡 SACC2017 • 全万兆基础网络,正在测试25G和40G网络 • 全VPC网络,用户完全隔离,并提供多种混合云接入方式:VPN、专 线网关等 • 从Neuron到自研,自主研发的SDN虚拟网络,实现了全链路的multi- path高可用 • 大量采用了NFV技术,单CPU核转发pps高达近1000万 京东公有云网络 SACC2017 Data Path SACC2017 Control Path SACC2017 • 支持了多种规格和操作系统,最高达76核,1.5T内存 • GPU服务器,服务人工智能计算 • 重构的调度系统,从Nova到自研:去除MQ,可靠的同步状态 京东公有云主机 SACC2017 京东公有云存储 • CloudStorage – 鉴权 – 防攻击 – 缓存 • MetaStorage – 元数据(千亿) • DataStorage – 数据(EB) CloudStorage MetaStorage DS EC DataStorage SACC2017 京东公有云大数据和AI 结构化数据 数据源 非结构化数据 SDK 数据接入 Plumber-离线数据接入 Magpie-实时数据接入 JDQ-实时数据总线 HDFS JDW-离线数 据平台 YARN MR Hive PIG TensorFlow Caffe JRC-流式 计算平台 Mars Spark Streaming Flink Storm 数据处理 数据分发 Plumber-数据分发 在线存储 Hbase RMDB Cache Index NoSql 业务系统 数据开放 广告 供应链 仓客配 推荐 …… 数据开发套件 数据可视化 作业调度 元数据 数据查询 机器学习平台 质量监控 流程中心 运维自动化 Presto Kylin Spark SQL XGboost Spark MLlib SACC2017 SACC2017
还剩17页未读

继续阅读

下载pdf到电脑,查找使用更方便

pdf的实际排版效果,会与网站的显示效果略有不同!!

需要 10 金币 [ 分享pdf获得金币 ] 0 人已下载

下载pdf

pdf贡献者

WindStand

贡献于2018-01-11

下载需要 10 金币 [金币充值 ]
亲,您也可以通过 分享原创pdf 来获得金币奖励!
下载pdf