当前位置: 首页 > 后端技术 > Java

惠普架构师解密从分布式到微服务,深入理解RPC、内存、存储、检索等问题

时间:2023-04-01 23:27:04 Java

惠普架构师从分布式到微服务的解密,深入理解RPC、内存、存储、检索等问题相关开源框架和工具越来越活跃,如:NetlixOSS、Dubbo、ApacheThrift等,SpringCloud有由于Spring社区在企业应用领域的广泛知名度和强大影响力,也受到了架构师和开发人员的极大关注。分布式架构和微服务平台是当今IT行业的关键技术,也是高级软件工程师和系统架构师必须掌握的核心技术。本书以传统分布式架构向基于容器的微服务架构的迁移为主线,全面深入地介绍了分布式架构和微服务相关的知识和技术。本书一开始并没有提及枯燥的分布式理论,而是讲述了一段精彩的IT发展史,重点讲述了大型机和UNIX小型机的衰落以及X86平台的兴起,从而潜移默化地引出了CPU、内存的分布式、网络、存储的演进过程恰恰是分布式软件系统运行的“物质基础”。然后简要介绍了系统架构所必需的网络基础,并详细介绍了分布式系统中的经典理论、设计例程和RPC通信,深入探讨了内存、SOA架构、分布式存储、分布式计算等方面的分析,最后介绍了详细介绍了全文搜索和消息队列中间件,以及微服务架构涉及的重点内容。本书是Leader-us多年架构经验的热情分享,主要面向关注分布式架构和微服务,立志成为强大架构师的IT从业者。需要本书完整pdf文档的朋友,可以直接【点此】获取第1章分布式系统分布式世界是一个非常复杂的世界。没有任何技术是孤立存在的,也没有任何技术可以适应所有人。场景。作为分布式系统架构师或高级研发人员,必须尽可能多地学习知识,掌握各种技术的演进路线,逐步从编程狂人升级为知识渊博的IT专家,实践与理论齐头并进,代码与页码齐飞,唯有如此才能更好成就未来。第二章“知识桶”中的短板——网络基础分布式系统从诞生到现在已经发展了几十年,伴随而来的是一些非常重要的基础理论。正是这些影响深远的基础理论为分布式系统奠定了坚实的基础,创造了分布式领域的宏伟建筑。为了练武,就让我们从这些经典的分布式理论开始学习吧。第三章分布式系统的经典基础理论分布式系统诞生和发展已经有几十年了,伴随而来的是一些非常重要的基础理论。正是这些影响深远的基础理论,奠定了分布式系统的坚实基础,铸就了分布式领域的宏伟建筑。为了练武,就让我们从这些经典的分布式理论开始学习吧。第4章讨论RPC。每一个分布式系统都离不开多进程通信问题,包括机器上多进程间的IPC通信和基于网络的远程通信技术。后者是分布式系统架构的核心。而关键的基础技术之一,就远程通信而言,除了NFS等各种特殊系统的远程通信协议外。FTP、SNMP。SMTP。从最古老的RPC远程通信技术,到曾经流行的SOAP(WebService)协议,再到流行的HTTPREST。如今,由于移动互联网的兴起和大数据时代的到来,多语言、高性能传输的各种RPC框架再次成为热门技术。Chapter5内存深入分析除了CPU,内存可能是最重要的计算资源。基本成为分布式系统标配的缓存中间件、高性能数据处理系统、流行的大数据平台,都离不开对计算机内存的深入理解和巧妙运用。在本章中,我们将探索这个熟悉而又复杂的领域。第6章分布式存储深入分析分布式文件系统一直是大规模分布式系统中最重要的基础设施之一。Hadoop中最重要的技术不是MapReduce,而是HDFS。除了HDFS之外,Spark还可以与老牌的分布式文件系统GlusterFS结合使用,其中最重要的是OpenStack。能够独立运行并赚钱的子系统就是分布式对象存储系统Swif。如今火热的Docker和Kubernetes容器技术仍然需要分布式文件系统来实现批处理任务中共享存储的问题,更何况无数电商系统都需要分布式文件系统来存储海量照片。因此,分布式系统架构师掌握与分布式存储相关的知识和技能是非常重要的。Chapter7浅谈分布式计算无论是网络、内存还是存储的分布式,它们最终的目的都是为了实现计算的分布式:数据在各个计算机节点上流动,各个计算节点可以通过一定的方式访问共享数据,分布式计算后的输出结果持久化存储和输出。分布式计算作为分布式系统最重要的能力和目标,也是大数据系统的关键技术之一。经过多年的发展和演进,已经有很多成熟的分布式计算相关的开源编程框架和平台供我们选择。作为架构师,我们应该尽可能地了解和掌握这些框架和平台。第8章全文搜索与消息队列中间件在前面的章节中,我们学习了构建分布式系统所必需的各种基础知识和技能,如分布式系统的基本理论、网络编程技术、RPC框架、内存计算、分布式文件系统、分布式计算框架等,但仅仅掌握这些内容是不够的。我们还需要学习和掌握分布式系统中的一些中间件,主要用于分布式系统中一些常见的业务场景:数据全文检索、日志和消息处理、数据库分片、网站负载均衡等。限于篇幅,本章只对全文搜索和消息队列这两个应用广泛但相对复杂的中间件做一个全面的介绍。第9章微服务架构微服务架构是目前非常流行的一个概念,它不是凭空产生的,它是技术发展的必然结果。微服务架构不是一个模糊和空洞的术语。它的核心概念和架构原则是真实的。虽然微服务架构目前还没有公认的技术标准和规范草案,但已经有一些在业界有影响力的开源框架。微服务架构平台,“架构师”可以根据公司的技术实力和项目的特点,选择合适的微服务架构平台,从而安心实施项目的微服务改造或开发过程。