膜拜!华为 18 级工程师用 349 页构建高可用 Linux 服务器,其实并不难
前言
本文是华为高级工程师从 Linux 服务器性能调优与高可用集群构建、MySQL 性能调优与高可用架构设计、自动化运维与 Linux 系统安全等多角度讲解构建高可用 Linux 服务器的方法和技巧。
希望大家能通过本文掌握 Linux 的精髓,轻松而愉快地工作,从而提高自己的技术水平,也希望大家通过分享的内容,了解运维工作的发展趋势,确定以后的学习目标。
目录
主要内容
第 1 章 Linux 服务器的性能调优;
作为一名高级系统架构设计师,每天都要处理系统方面的架构优化设计工作,比如电子商务系统 CDN 大型广告平台和 DSP 电子广告系统运维方案的确定及平台架构的设计等,此外,还会涉及核心业务的系统优化升级工作。在其中,系统的性能优化是一个非常有意义的工作,也是一个不太容易的工作。性能优化要以系统的稳定性为第一原则,也要本着挖掘系统潜能的宗旨,在两者相互矛盾的时候,以稳定为主。
第 2 章 Shell 脚本在生产环境下的应用;
在笔者目前工作的 CDN 平台中,Shell 脚本正发挥着巨大的作用,无论是在应用运维部、运维开发部还是大数据平台组内部的 gitlab 中,Shell 脚本的代码比重都很高。
Shell 除了最常规的 Cron 备份作用以外,还有处理业务逻辑、日志切分上传、系统性能和状态监控及系统初始化等作用。此外,Shell 脚本具有很好的可移植性,有时跨越 UNIX 与 POSIX 兼容的系统仅需略做修改,甚至不必修改就可直接使用。相比较 C 或 C++语言,它能够更快捷地解决相同的问题。
在 CDN 的各个子平台中,Shell 也能起到耦合的作用,成为我们运维开发人员的瑞士军刀。所以不论是系统管理员,还是运维开发人员,掌握 Shell 脚本语言能对我们的工作起到很大的帮助作用。
第 3 章利用 Vagrant 搭建分布式环境;
Vagrant 是为了方便实现虚拟化环境而设计的,使用 Ruby 开发,基于 VirtualBox 等虚拟机管理软件的接口,提供了一个可配置、轻量级的便携式虚拟开发环境。使用 Vagrant 可以很便捷地建立起一个虚拟环境,而且可以模拟多台虚拟机,这样我们平时还可以开发机模拟分布式系统。
第 4 章轻量级自动化运维工具介绍;
随着集群环境的规模越来越大,网站需要管理和维护的机器也越来越多,比如笔者现在所在的 CDN 公司,线上提供的业务机器达到 8000 多台的规模,按照业务来划分平台。
如果单纯靠手动维护的话,就算单个平台工作量也会很多。这个时候我们需要找一些轻量级的简单易用的自动化运维工具来进行日常的运维工作,所以这里简单给大家介绍基于 Python 语言开发的 pssh 和 Fabric 工具。
第 5 章 Linux 集群及其项目案例分享;
作为一名高级系统架构设计师,在工作中经常会涉及一些对外项目,比如小中型金融资讯网站和电子商务订单系统的架构及实施。在实施项目方案时,客户基本上都会提出这样一条要求:保证服务的高可用。
基于此要求,我们所有的应用服务器,包括负载均衡器、文件服务器、RabbitMQ 集群服务器、Web 服务器及 MySQL 数据库,基本都配备了两台或两台以上服务器。
同时,根据客户的要求及客户自身机房的硬件配置,我们会选择不同的负载均衡器方案,比如硬件有 F5 和 Citrix NetScaler,软件方面有 LVS、Nginx 及 HAProxy,云计算服务产品有 Elastic Load Balancing。可以说在相当长的一段时间内,我的工作之一就是不停地测试它们,不停地完善和优化整体网站的架构。
第 6 章 MySQL 性能调优及高可用案例分享;
随着网站的 UV 和 PV 日渐增多,POST 请求越来越多,数据库的压力也随之增加。究竟应该如何对 MySQL 数据库进行优化呢?下面笔者将从 MySQL 服务器对硬件的选择、MySQL 的安装、my.cnf 配置文件的优化及架构调整等方面进行说明。在本章最后,还会与大家分享 MySQL 和 Redis 的高可用案例。
第 7 章 Linux 防火墙介绍;
本章首先会向大家介绍 Linux 下的防火墙(即 iptables,下面的内容简称其为 iptables)的详细使用方法,然后介绍 Linux 服务器下的安全防护手段。初学 Linux 防火墙的读者可能会觉得 iptables 语法复杂,又在纯字符下操作,不容易学习。事实上只要掌握正确的方法,严格按照 iptables 的语法规则执行,循序渐进,上手也是件很容易的事情。
学习 iptables 跟学习英语-样,都有语法和规律可言,建议大家参考笔者所提供的 iptables 学习脚本和 iptables 线上脚本一起学习,相信在了解 iptables 的语法规则后,很快就可以掌握 iptables 的用法了。
第 8 章 Linux 系统安全相关篇;
了解 iptables 防火墙后,大家可能会对它强大的 IP 过滤功能感到惊叹,但是在日常工作中,有时仅仅过滤 IP 满足不了我们的工作需求,因此,这里再介绍一种 Linux 基于应用级别的防火墙,它就是强大的 TCP_ wrappers。
附录 GibLab 在开发工作中的实际应用
GitLab 是一个利用 Ruby on Rails 开发的开源应用程序,实现一个自托管的 Git 项目仓库,可通过 Web 界面进行访向公开的或者私有的项目。它拥有与 GitHub 类似的功能,能够浏览源代码,管理缺陷和注释,也可以管理团队对仓库的访问,它非常易于浏览提交过的版本并提供一一个文件历史库。团队成员可以利用内置的简单聊天程序( Wall)进行交流。
它还提供了一个代码片段收集功能,可以轻松实现代码复用,便于日后有需要的时候进行查找。开源中国代码托管平台 git.oschina.net 就是基于 GitLab 项目搭建的。
感谢大家支持!!
需要文章中配套资料的朋友可以——点击传送门
评论