皮皮网

1.运维工程师为什么要学python
2.做运维要学python吗？
3.如何用python做一个设备运维软件
4.为什么运维需要会Python开发
5.手把手带你搭建这款开源自动化运维平台-OpsManage
6.自动化运维初级村Paramiko vs Netmiko

运维工程师为什么要学python

       ã€€ã€€ç»å¸¸æœ‰äººåœ¨ç¾¤é‡Œé—®ï¼Œè¿ç»´äººå‘˜éœ€ä¸éœ€è¦å­¦å¼€å‘？需不需要学 PYTHON ？ PYTHON 和 SHELL 有什么区别？天天问这种好水的问题，我实在受不了，决定帮大家扫扫盲，求求新手们，以后别他妈瞎问了。

       ã€€ã€€çŽ°é˜¶æ®µï¼ŒæŽŒæ¡ä¸€é—¨å¼€å‘语言已经成为高级运维工程师的必备计能，不会开发，你就不能充分理解你们系统的业务流程，你就不能帮助调试、优化开发人开发的程序， 开发人员有的时候很少关注性能的问题，这些问题就得运维人员来做，一个业务上线了，导致 CPU 使用过高，内存占用过大，如果你不会开发，你可能只能查到进程级别，也就是哪个进程占用这么多，然后呢？然后就交给开发人员处理了，这样咋体现你的价值？

       ã€€ã€€å¦å¤–，大一点的公司，服务器都上几百，上千，甚至数万台，这种情况下怎样做自动化运维？用 SHELL 写脚本 FOR 循环？呵呵，歇了吧， SHELL 也就适合简单的系统管理工作。到复杂的自动化任务还得要用专门的开发语言。你可能说了，自动化管理有专门的开源软件＼监控也有，直接拿来用下就好了，但是现有的开源软件如 puppet\saltstack\zabbix\nagio 多为通用的软件，不可能完全适用你公司的所有需求，当你需要做定制、做二次开发的时候，你咋办？找开发部门？开发部门不懂运维的实际业务逻辑，写出来的东西烂烂不能用，这活最后还得交给运维开发人员来做。

       ã€€ã€€å…¶æ¬¡ï¼Œä¸ä¼šè¿ç»´å¼€å‘，你就不能自己写运维平台＼复杂的运维工具，一切要借助于找一些开源软件拼拼凑凑，如果是这样，那就请不要抱怨你的工资低，你的工作不受重视了。

       ã€€ã€€ä¸ºä»€ä¹ˆè¦å­¦ PYTHON ？

       ã€€ã€€PYTHON 第一是个非常牛 B 的脚本语言， 能满足绝大部分自动化运维的需求，又能做后端 C/S 架构，又能用 WEB 框架快速开发出高大上的 WEB 界面，只有当你自已有能力做出一套运维自动化系统的时候，你的价值才体现出来，你才有资格跟老板谈重视， 否则，还是老老实实回去装机器吧。

       ã€€ã€€è¿ç»´å¼€å‘为什么要用 PYTHON ？

       ã€€ã€€Good question,运维源码运 为什么不用 PHP ， JAVA ， C++ ， RUBY ，这里我只能说，见人见智， 如果你碰巧已经掌握了除 PYTHON 之外的其它语言，那你爱用啥用啥，如果你是一个连 SHELL 都还没写明白的新手，想学个语言的话，请用 PYTHON ， 为什么呢？首先， PHP 是跟 PYTHON 比的最多的，其实他俩根本就不用比，为什么呢？两个语言适用性不同， PHP 主要适用于 WEB 开发，可以迅速的做出中小型，轻量级的 WEB 网站，但后端嘛，基本还是要借助其它语言， 借助什么语言呢？ SHELL ？ PYTHON ？呵呵。 而 PYTHON 呢， 是个综合语言， 前后端都可以，单拿出来比 WEB ，也一点不比 PHP 差，但为什么WEB方向上 PHP 比 PYTHON 要火？ 先入为主嘛， PHP 年代诞生就是做 WEB 的， PYTHON 年后才出现 WEB 框架，但论优秀程度上， PYTHON 的 WEB 框架基本上出其无左，至少是跟 PHP 比。

       ã€€ã€€é‚£ JAVA 呢？好吧，一个臃肿＼中庸＼豪无新意的语言，还是老老实实用它来做 ERP 吧，搞个运维小平台，用 JAVA 真心没啥必要，在我看来， JAVA 就是稳定的中年男人，稳定＼成熟＼秃顶，而 PYTOHN 代表的就是青春， 简洁＼快＼干净＼帅！

       ã€€ã€€C++ ï¼¼ C ，这个嘛，我只能说，如果你会了 PYTHON, 又会 C 的话，那你会更吃香，但是不会 C 的话，其实也无大碍，基本上做运维的人，搞搞 C 就是为了来装 B 的，因为多数情况下你都到不了看系统底层源码的程度。

       ã€€ã€€RUBY ，小日本开发的，还不错，风格跟 PYTHON 有点像，因为 ruby onrails 出了名，国外用的比较多，国内，放心吧，没戏， PYTHON 已经把它的想象空间都占死了。

       ã€€ã€€å½“然还有新的语言 GO ， 有些搞运维的看见做开发的人员搞 GO ，也想凑热闹，觉得是未来，我想说，别瞎没事跟风， GO 再成功，也不会变成运维开发语言。

       ã€€ã€€æœ‰äº›äººè§‰å¾— PYTHON 效率底，说他不能支持多线程， OH ，好吧，这个还有点说对了，但是我想问，看我这篇文章的有几个做过搜索引擎开发？有几个做个上亿 PV 的并发网站开发？ 有几个看过 LINUX 内核源码？如果没有，请别瞎跟着传了，知道 PYTHON 为什么不支持多线程吗？这句话问错了，其实 PYTHON 支持多线程，只是不支持多 CPU 多线程，也就是一个程序 spawn 出来的多线程只能占用一个 CPU ，但是为什么呢？噢，因为 GIL ， GIL 是什么东东，请自行补脑。。。但是你非得用多线程吗？你可以用多进程呀，再牛 B 你还可以用协程呀，这些 PYTOHN 支持的都很好呀，如果你的程序逻辑不好，搞个多线程也快不起来。我认识一个博士讲过一句话，我觉得不错，他说，程序效率高低， % 都是写程序的人决定了，语言本身就占 % ，所以下次有人再说 PYTHON 效率低的时候，请让他先回去自己检查下自己的程序多了多少无用的逻辑、循环等等。 这个博士自己用 PYTHON 写的 WEB 程序，一台服务器每天能处理上亿请求，一秒并发近两万， 什么 WEB 框架这么牛 B ？ 别问它是谁， 它叫 tornado 。

       ã€€ã€€PYTHON 能否自学？

       ã€€ã€€å½“然可以，什么都可以自学，前提是你得能学得会，见过 N 多菜鸟踏上上自学的不归路，他妈的什么都能自学的话，还用大学干什么？自己在家鳖不就行了？动不动就说 PYTHON 是个脚本语言，自己看看就不会了，说这话的只可能有两种人，一种是高手，一种是 SB ，对于高手来讲，他肯定已经会其它语言， PYTHON 在这种情况下，自学当然就很容易学会，几年前我刚接触 PYTHON 时，代码遇到问题，找了个开发的哥们帮调试，哥们帮调了十几分钟就搞定了，结果人家以前一句 PYTHON 代码也没写过，为什么，因为语言都有相通之处，一门掌握好了，其它门自己学学就会了。但对于新手来讲，没任何语言基础就开始自学，那么恭喜你，菜鸟们见此文章为证，从今天开始自学，一年后，你要是能自己做出个软件来，来找我要一千块钱。 哈哈，真的。 基本上自学是属于专业人员干的事情，就像会一门乐器了，自己学下就可能学会另一门，但我之前没音乐基础，跟着老师都没把吉它学会。

       ã€€ã€€æ‰€ä»¥å¥‰åŠæ²¡åŸºç¡€åˆæƒ³å­¦ PYTHON 的同学，花点钱去报个班学吧，拿钱换时间，时间是生命，钱没了可再挣钱，时间过去了就再也不会回来，如果你不信邪，非要自己学，那我佩服你的勇气，不过自己试试就知道了。

       ã€€ã€€è¯´äº†è¿™ä¹ˆå¤šï¼Œåªæƒ³å‘Šè¯‰é‚£äº›è¿·èŒ«ä¸çŸ¥æ‰€æŽªè¯¥å­¦ä»€ä¹ˆè¯­è¨€çš„新手们， 在你还没学好走路的时候，不要老想着，将来我当上老板了，我是开宝马呢？还是开奔驰呢？先学会骑自行车吧。。。

       è½¬è½½

做运维要学python吗？

       å»ºè®®è¿ç»´ä¸€å®šè¦ä¼šå¼€å‘

       çŽ°é˜¶æ®µï¼ŒæŽŒæ¡ä¸€é—¨å¼€å‘语言已经成为高级运维工程师的必备技能，不会开发，你就不能充分理解你们系统的业务流程，你就不能帮助调试、优化开发人开发的程序，开发人员有的时候很少关注性能的问题，这些问题就得运维人员来做，一个业务上线了，导致CPU使用过高，内存占用过大，如果你不会开发，你可能只能查到进程级别，也就是哪个进程占用这么多，然后呢?然后就交给开发人员处理了，这样怎么体现你的价值?

       å¼€å‘语言那么多种，为什么比较建议大家去学python呢？

       é¦–å…ˆPython是个非常牛B的脚本语言，能满足绝大部分自动化运维的需求，又能做后端C/S架构，又能用WEB框架快速开发出高大上的Web界面，所以只有当你自已有能力做出一套运维自动化系统的时候，你的价值才体现出来，才能自己去选公司，而不是公司来选你...

       è®°å¾—一个博士讲过一句话，我觉得不错，他说，程序效率高低，%都是写程序的人决定了，语言本身就占%，所以下次有人再说Python效率低的时候，请让他先回去自己检查下自己的程序多了多少无用的逻辑、循环等等。这个博士自己用Python写的WEB程序，一台服务器每天能处理上亿请求，一秒并发近两万，什么WEB框架这么牛B?　别问它是谁，它叫tornado。

       ä»¥ä¸Šæˆ‘的回答希望对你有所帮助

如何用python做一个设备运维软件

       Python开发的jumpserver跳板机

       jumpserver跳板机是一款由Python编写开源的跳板机(堡垒机)系统，实现了跳板机应有的功能。基于ssh协议来管理，客户端无需安装agent。

       ä¼ä¸šä¸»è¦ç”¨äºŽè§£å†³ï¼šå¯è§†åŒ–安全管理

       ç‰¹ç‚¹ï¼šå®Œå…¨å¼€æºï¼ŒGPL授权

       Python编写，Django开发框架，容易再次开发

       å®žçŽ°äº†è·³æ¿æœºåŸºæœ¬åŠŸèƒ½ï¼šè®¤è¯ã€æŽˆæƒã€å®¡è®¡ã€‚集成了Ansible、批量命令等。功能强大。

       é€šä¿—点就是起到监控谁在服务器上做了什么操作等。录像回放、命令搜索、实时监控、批量上传下载等。

       ç¬¬ä¸‰ï¼šPython开发的Magedu分布式监控系统

       ä»¥è‡ªåŠ¨åŒ–运维视角为出发点，自动化功能、监控告警、性能调优，结合saltstack实现自动化配置管理等内容进行了全方位的深入剖析。

       ä¼ä¸šä¸»è¦ç”¨äºŽè§£å†³ï¼šè‡ªåŠ¨åŒ–监控常用系统服务、应用、网络设备等。分布式可监控更多服务器，分区域监控再汇总。Zabbix监控结合Python自定义监控脚本。

       ç›‘控系统需求讨论：

       ç›‘控常用系统服务、应用、网络设备等？一台主机上可监控多个不同服务、不同服务的监控间隔可不同？同一个服务在不同主机上的监控间隔、报警阈值可不同？告警级别？数据可视化，如何做出简洁美观的用户界面？如何实现单机支持+机器监控需求？采取何种通信方式？主动、被动？

       ç¬¬å››ï¼šPython开发的Magedu的CMDB

       cmdb的开发需要包含三部分功能：采集硬件数据、API、页面管理。

       ä¼ä¸šä¸»è¦ç”¨äºŽè§£å†³ï¼šé¡¹ç›®åŠŸèƒ½ï¼Œé‡‡é›†ç¡¬ä»¶æ•°æ®ã€Api、页面管理。统计资产，例如服务器存放位置，服务器上的账号等等。

       æ‰§è¡ŒæœåŠ¡çš„过程如下：服务器的客户端采集硬件数据，然后将硬件信息发送到API，API负责将获取到的数据保存到数据库中，后台管理程序负责对服务器信息的配置和展示。

       ç¬¬äº”：Python开发的任务调度系统

       Python任务调度系统的multiprocessing模块不但支持多进程，其中managers子模块还支持把多进程分布到多台机器上。

       ä¼ä¸šä¸»è¦ç”¨äºŽè§£å†³ï¼šé€šä¿—的理解，批量管理crontab定时任务。原理用户通过web页面设置任务，传输到任务调度系统服务器上的客户端，客户端收集数据反馈给服务器端，服务器端根据任务具体内容调度后端的集群服务器做定时任务。

       ä¸€ä¸ªæœåŠ¡è¿›ç¨‹å¯ä»¥ä½œä¸ºè°ƒåº¦è€…，将任务分布到其他多个机器的多个进程中，依靠网络通信。想到这，就在想是不是可以使用此模块来实现一个简单的作业调度系统。

       ç¬¬å…­ï¼šPython运维流程系统

       ä½¿ç”¨python语言编写的调度和监控工作流的平台内部用来创建、监控和调整数据管道。任何工作流都可以在这个使用Python来编写的平台上运行。

       ä¼ä¸šä¸»è¦ç”¨äºŽè§£å†³ï¼šé€šä¿—点说就是规范运维的操作，加入审批，一步一步操作的概念。

       æ˜¯ä¸€ç§å…è®¸å·¥ä½œæµå¼€å‘人员轻松创建、维护和周期性地调度运行工作流（即有向无环图或成为DAGs）的工具。这些工作流包括了如数据存储、增长分析、Email发送、A/B测试等等这些跨越多部门的用例。

       è¿™ä¸ªå¹³å°æ‹¥æœ‰å’Œ Hive、Presto、MySQL、HDFS、Postgres和S3交互的能力，并且提供了钩子使得系统拥有很好地扩展性。除了一个命令行界面，该工具还提供了一个基于Web的用户界面让您可以可视化管道的依赖关系、监控进度、触发任务等。

       æ¥ä¸ªå°æ€»ç»“

为什么运维需要会Python开发

       Python的特点在于灵活运用，因为其拥有大量第三方库，平台平台所以开发人员不必重复造轮子，运维源码运就像搭积木-样，平台平台只要擅于利用这些库就可以完成绝大部分工作。运维源码运

       对于运维而言，平台平台vue elementui 源码系统运行过程中变化小，运维源码运重复性非常高。平台平台Python 是运维源码运高层语言，只需要（编辑-测试-调试）过程，平台平台不需要编译，运维源码运在每一次使用时直接调用库文件。平台平台开发速度Python是运维源码运C、C++的平台平台5倍，甚至可以将C、运维源码运C++已经编好的程序直接附在python中使用，python就像胶水语言一样，所以python非常适合做测试，运维管理。源码域名绑定其次，不会运维开发，你就不能自己写运维平台复杂的运维工具，一切要借助于找一些开源软件拼拼凑凑，如果是这样，你的工作不受重视了，自身竞争力也小。学会Python能满足绝大部分自动化运维的需求，又能做后端C/S架构，又能用WEB框架快速开发出高大上的Web界面。能够自己做出一套运维自动化系统，体现自己的价值。千锋教育多年办学，课程大纲紧跟企业需求，更科学更严谨，每年培养泛IT人才近2万人。不论你是零基础还是想提升，都可以找到适合的wpf界面源码班型，是一家性价比极高的教育机构

手把手带你搭建这款开源自动化运维平台-OpsManage

       手把手带你搭建开源自动化运维平台-OpsManage

       经过两天的辛勤努力，我成功搭建了这个平台，并准备分享我的经验，这样以后的扩展会更便捷。让我们开始详细的安装步骤吧。

       1. 项目介绍

       OpsManage是一个基于Python、HTML、JS构建的自动化运维平台，前端框架采用Bootstrap，后端使用Django，任务调度依赖于Celery和Redis。

       2. 硬件环境与软件版本

       安装Python：首先安装必要的依赖，然后确认安装成功。

       配置Redis：设置密码并启动服务。

       MySQL安装与配置：安装repo文件，修改配置，启动服务并初始化数据库。

       RabbitMQ：重启服务以应用配置更改。c stl 源码

       3. OpsManage安装与配置

       从git获取源代码并修改配置。

       进入Python虚拟环境，安装第三方库，解决anyjson安装问题。

       生成数据表和创建管理员账户。

       配置supervisord和nginx，启动部署平台。

       4. 验证与访问

       通过浏览器访问服务器的IP地址，检查平台是否正常运行。

自动化运维初级村Paramiko vs Netmiko

       秉承着“最小化上手范围”的原则，相信大家经过新手村二十多个章节的学习，都已经对Python有了初步的了解，基础的学习必然是略显枯燥无聊的，但希望大家可以在“新手村”系列视频和文章的指导下有自己阅读程序，分析需求，编写程序，调试程序的基本技能。

       以上也是订票助手 源码进入初级村的最低门槛，如果还没有具备上述能力的朋友，衷心的希望你可以返回新手村进行学习，切勿囫囵吞枣，盲目求快。

       初级村包含的内容：Paramiko和Netmiko，两者的使用方式及优劣；Python正则解析，将通过SSH收集回来的各种信息进行正则解析；番外：Text-FSM解析；Python SNMP，如何使用Python调用SNMP采集指令，并讲解OID使用方式；NetConf，如何通过NetConf对网络设备进行操作；Crontab并回调CMDB，如何设置定时执行SSH任务进行定期巡检，并更新回写CMDB；番外：Python Scheduler；Flask Web框架，将SSH和NetConf与Web框架相结合，通过API方式或前端调用其执行。

       在自动化运维领域里面，单从服务器运维的角度来讲，由于可以提前对服务器做系统的定制安装，所以一些大厂会选择在装机时植入特定的Agent，以此实现远程控制服务器的目的。不过对于大部分的公司，服务器运维或者网络设备运维都仍然依靠远程SSH这一方法，所以我们使用Python作为自动化运维的编程语言的话，就非常需要一个第三方包来实现这一功能，而Paramiko和Netmiko可以说是扛把子的角色。相信看这个教程的朋友肯定都听过这两个工具包，但可能并不是所有的人都了解这两个包之间的关系。除此之外，网上五花八门的对于用哪个更好的争论也难以分辨。那么这个章节就先给大家介绍一下这两个包的来龙去脉，以及我个人在工作中对两个包都深度使用过之后的体验。

       OpenSSH，介绍第三方库之前有必要先科普一下关于SSH的知识。我们经常谈论的SSH是一个传输层协议，相比Telnet来说可以与远端设备建立更安全的连接通道，对传输的内容进行加解密处理，所以基于安全考虑，企业中几乎所有的对远程设备的连接都要求使用SSH连接。

       SSH协议有两种不兼容的版本：SSHv1和SSHv2。那么设备想要支持SSH协议，就需要在设备上安装一个与之相匹配的服务端/客户端的应用程序，而OpenSSH就是目前使用最为广泛的SSH协议的开源实现。

       对于较老的SSHv1，由于存在加密算法的专利问题和数据完整性的缺陷，OpenSSH已经删除了对其的支持。所以目前OpenSSH主要支持SSHv2。

       OpenSSH套件包含以下工具：

       整体的结构图如下所示：

       Paramiko/Netmiko简介：Paramiko遵循SSH2协议，支持以加密和认证的方式，进行远程服务器的连接；模块本身使用Python语言编写和开发，只有像crypto这样的核心函数才会用到C语言。

       Paramiko目前是Python中应用最广的SSH模块，大家耳熟能详的Ansible， Netmiko，Nornir，NAPALM其实都是用到了Paramiko来做SSH的实现，所以也可以从中看出，其实Paramiko的角色其实是Python语言里实现SSH功能的底层工具包。

       那么既然是底层工具包就必然为了具备完备的通用性而损失了易用性，而Paramiko过于底层的方法调用也是被网友最为诟病的原因。

       但我们已经提到，Python想要实现SSH远程连接，就逃不开Paramiko，那么我们就非常有必要了解一下Paramiko的基本实现原理和主要的组成类。

       源码核心架构图：Paramiko中几个大的概念和相互之间的关系基本就是如上图所示了（一些身份认证类和其他杂类并没有包含其中，在学习初期也没有深究这些的必要）。

       总体来说Paramiko的源码核心架构并不复杂，但对于使用该包的编程人员来说，暴露了太多底层细节。因为其最High-Level的类就是一个SSHClient对象，而一个SSHClient对象又必须通过创建Channel来完成数据的收发。

       所以说Paramiko其实就是一个实现了SSH功能的底层工具包，它可以连接任何兼容SSHv2的设备，包括：服务器，网络设备，打印机，甚至是监控摄像头，并且它最核心的功能就是：建立SSH连接 -> 发数据 -> 收数据。

       Netmiko：但看本系列的教程的朋友应该大多数都是具备网络运维背景的朋友，想实现一些网络运维中的自动化能力，那么平时所要面对的就都是网络设备，我这里推荐大家使用Netmiko。

       我们可以通过一个流程图来表示一下除了Paramiko本身的底层能力外，还需要哪些步骤才能完成一次与网络设备的交互。

       交互流程图：从上述的流程图中可以看出，除了Paramiko支持的底层SSH连接与数据发送接收功能之外，我们想要与网络设备进行交互还需要诸多地方需要处理，而Netmiko正好可以提供以上这些功能，这也是我们为什么选择用Netmiko的原因。

       其实网上有很多文章都有对Paramiko和Netmiko的对比，但大多数的解释都不够准确，并且还有很多直接通过代码来演示区别的，更是让一些编程基础不太好的朋友十分头疼，所以我希望大家可以通过这一章节，非常清晰的知道，两者之间的区别究竟有哪些。

       这一章节并没有提到关于使用Paramiko或者Netmiko来进行连接设备的代码，但对Paramiko的源码核心架构做了介绍，这也是大家后续使用Netmiko必须要掌握的基础知识，并且对于Netmiko基于Paramiko的改进也通过流程图展示给大家，对后续的深入理解及二次开发会非常有帮助。