【快班】大型电商分布式系统实践_选课中心-炼数成金-Dataguru专业数据分析社区

首页 > 选课中心 > 分布式系统 > 【快班】大型电商分布式系统实践

【快班】大型电商分布式系统实践

此课程所属【大数据攻城狮专业】专业，报名专业套餐，可享受0元学习特惠！点击了解详情

随报随学	共13课	★★☆
开课时间	课程周期	难易度

招生中

立即报名

课程介绍: 在大型网站架构的演变过程中，集中式的架构设计出于系统的可扩展性、可维护性以及成本等多方面的因素考虑，逐渐被放弃，转而采用分布式的架构设计。分布式架构的核心思想是采用大量廉价的PC server，构建一个低成本、高可用、高可扩展、高吞吐的集群系统，以支撑海量的用户访问和数据存储，理论上具备无限的扩展能力。分布式系统的设计，是一门复杂的学问，它涉及到包括通信协议、远程调用，服务治理，系统安全、存储、搜索、监控、稳定性保障、性能优化、数据分析、数据挖掘等方方面面，而本课程将为大家一一进行介绍。

课程大纲: 第一课
大型分布式系统概述
集中式、垂直式、分布式应用架构的变迁思路
SOA体系架构，服务化的演变
SOA的基础--rpc远程调用
--rpc与通信协议
--对象序列化方式的选择
--异构系统还是同构系统
--远程调用的实现方式，基于http协议的远程调用，基于tcp协议的远程调用

第二课
服务的路由和负载均衡
--为什么需要服务治理
--服务的负载均衡，复杂环境下负载均衡所面临的问题(负载不均、多机房)
--负载均衡算法及其扩展
--如何动态配置路由规则
--服务上线下线的动态感知
--客户端容灾方案的实现
--如何使用zookeeper实现服务路由和负载均衡
SOA架构所面临的问题

第三课
构建安全的分布式网站
常见的web攻击手段，xss、crsf、sql注入攻击、DDos攻击等等
面对攻击，应该如何防御，具体的防御手段
如何架构安全的网站，保障通信的安全
常用的安全算法的使用场景<1>
--校验数据是否被篡改，数字摘要
--加密传输内容，对称加密算法
--校验消息发送和接收方身份，非对称加密算法

第四课

构建安全的分布式网站

常用的安全算法的使用场景<2>

数字签名及其使用场景

数字证书及其使用场景

为什么需要认证

--签名认证的原理和实现

--摘要认证的原理和实现

为什么需要https协议，https协议能够带来什么

--https协议的原理解析

--使用tomcat部署https web

平台厂商所面临的问题及开放平台的出现

oauth协议解决了什么问题及oauth协议的适用场景

第五课
分布式系统基础设施之缓存
--缓存的使用场景
--数据一致性的保障
--缓存的负载均衡问题，雪崩效应的产生
--如何解决缓存的负载均衡问题
--缓存的强依赖及可靠性的解决
--memcache的介绍及使用
分布式系统基础设施之持久化存储
--IOE太贵，无法扩展，mysql+pc server节约成本
--pc server的承载有限，业务拆分的实施，mysql复制策略
--读的压力过大，读写分离
--单表数据量太大，则分表
--写入压力太大，则分库

第六课
分布式系统基础设施之持久化存储
--为提升性能，mysql的取舍
--海量数据，高并发写入，该hbase上场了
--hbase的api，row key的设计
--什么场景不适合使用hbase
--小而美的redis，多种数据类型，快速存取
--redis数据类型的介绍，使用案例
分布式系统基础设施之消息系统
--消息系统的使用场景，为什么要使用消息系统
--消息发送的两种模式，p2p和订阅
--消息发送的一致性和可靠性，最终一致性解决方案
--消息投递的顺序问题的产生及消息内容的去重

第七课
分布式系统基础设施之垂直化搜索引擎
垂直化搜索的使用场景
基于lucene的搜索引擎的基本原理
--构建索引
--索引更新与查询
--结果排序
--高亮
--中文分词
--索引优化
搜索引擎的扩展性
使用搜索引擎所面临的问题

第八课
保障分布式系统的稳定性
在线日志分析及常用命令
在线日志分析的技巧，sed、awk、shell的及使用
如何查看服务器当前的状态，服务器的监控指标解析
--load、cup利用率
--磁盘剩余空间
--网络traffic
--磁盘IO
--内存使用
--qps、rt
jvm gc对稳定性和性能的影响
如何分析jvm产生的gc日志

第九课
保障分布式系统的稳定性
集群监控及流量控制
--服务器的心跳检测实现方法
--大流量到来前，服务器的容量评估及应用水位的检测
--如何对流量进行控制
--服务稳定性的实现方案: 依赖管理&服务分级&优雅降级&开关&应急预案
高并发系统与普通系统的区别
--原子操作解决了什么问题
--jvm原子操作实现的原理(包含jvm源代码解析)

第十课
保障分布式系统的稳定性
如何设计高并发系统
--java的多线程同步及锁的机制
--分布式条件下数据一致性及系统可扩展性的保障
--高并发条件下减库存的案例
性能优化--找出系统的性能瓶颈
--找出前端的性能问题
--监测网页的响应时间
--监测java方法的响应时间

第十一课
性能优化--找出系统的性能瓶颈
--java应用程序gc日志的分析
--影响mysql数据库性能的因素
为什么要进行性能测试
性能测试的方法和工具
--apache ab
--apache jmeter
--load runner
性能环境和真实环境的差异
如何进行性能优化
--前端性能优化的实施
--java程序性能优化的实施

第十二课
如何进行性能优化
--数据压缩带来性能的提升，不同算法效率的比较
--使用缓存提升性能
--mysql数据库查询优化
--java应用程序gc优化
--使用新硬件提升性能
java应用常用的故障排查工具
--jps&jmap&jinfo&jstack
--mat
--VisualVM
--java应用典型问题

第十三课
数据分析对于大型分布式网站的意义
分布式文件系统
离线数据分析，mapreduce、hive
实时数据分析，storm
离线数据同步，Apache sqoop
实时数据同步，mysql的实现方案
数据报表能提供什么，报表系统的实现思路

授课讲师: 某大型电商网站资深研发工程师，在网站分布式环境下耳濡目染，参与了众多业务系统的开发和架构设计工作，在分布式系统架构设计、高并发系统设计、系统稳定性保障等领域积累了较为丰富的实践经验，著有《大型分布式网站架构设计与实践》一书，曾在程序员上发表过《漫谈基于http协议的SOA架构》，《浅析HTTP平台的安全稳定性架构》两篇文章，对基于HTTP协议的SOA架构有深入研究，在系统稳定性保障方面有较为丰富的实践经验。

授课对象: 希望从事互联网分布式网站应用开发的相关行业工作的开发人员及在校学生

课程试听

课程学费: 学费：400元（固定学费：300元 + 逆向学费：100元）
新颖的课程收费形式：“逆向收费”约等于免费学习，课程收取300元固定收费 + 100元逆向学费，学习圆满则全额奖励返还给学员！

特别说明如下: 本门课程本来打算完全免费，某位大神曾经说过“成功就是正确的方向再加上适度的压力”。考虑到讲师本身要付出巨大的劳动，为了防止一些朋友在学习途中半途而废，浪费了讲师的付出，为此我们计划模仿某些健身课程，使用“逆向收费”的方法。在报名时每位报名者收取400元，其中300元为固定收费，另外100元是暂存学费，即如果学员能完成全部课程要求，包括完成全部的书面作业，则100元全款退回。如果学员未能坚持到完全所有的学习计划任务，则会被扣款。期望这种方式可以转化为大家强烈的学习愿望和驱动力！

课程授课方式

1、学习方式：老师发布教学资料、教材，幻灯片和视频，学员通过网络下载学习。同时通过论坛互动中老师对学员进行指导及学员之间相互交流。

【快班】大型电商分布式系统实践	立即报名
开课时间：随报随学课程周期：共13课难易度：★★☆

授课老师

课程所属专业

其他快班课程

专业相关课程

热招课程