百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

前方高能!如何保障Python应用的高性能

ccwgpt 2025-03-01 13:10 74 浏览 0 评论

Python作为一种推崇“简单、优雅、明确”的面向对象语言,以其简捷明了的语法结构,丰富的类库,出色的易用性在互联网时代得到了广泛的应用。不论是国外的Facebook、Youtube、Instagram、Pinterest,还是国内的知乎、豆瓣,用Python开发的Web应用已经无处不在。

而随着云计算时代的到来,以及基于Python的云架构开源项目OpenStack的流行,越来越多的企业开始引入云服务的概念,尝试利用云计算服务来构建新的高可用架构。而同样地,企业级应用程序的设计与开发方式也发生了转变——开发人员需要构建原生的云计算应用,以便更有效的降低运营成本并提升灵活性。利用云平台与云服务再结合Python来进行应用开发,就成为了一种行之有效的途径。

Python确实是个好语言,简单易用上手快,标准库和PyPI第三方库有丰富而又有用的资源,可以快速的解决开发者的问题,而不用重复造轮子,这些特点使得Python这几年逐渐流行起来。相对而言,C受限于较为低级的语法,开发周期长,一般用来开发性能要求高的软件。Java偏重于企业开发,缓慢的JVM启动速度导致Java不适合用来开发系统管理脚本。而Python作为一个多面手,被广泛应用于Web开发、科学计算、数据分析、云计算(OpenStack)、运维平台和自动化运维(SaltStack)等。

Python的优点很多,但随着企业业务向云端和移动互联网上的迁移,真实线上环境的复杂性,巨大的流量压力,以及IT架构的高可用问题,都会造成Python应用的性能瓶颈。作为Pythoner的你是否常被这几个问题所困扰:

1. 代码执行速度真的很快吗?

2. 代码性能瓶颈出在哪里?

3. 内存消耗大不大?

4. 是否存在内存泄漏?

透视宝Python监控实现原理

在刚刚举行的PyConChina 2015大会上,国内领先的应用性能管理服务商云智慧VP刘国强 (Bruce Liu)先生,为广大Pythoner带来《Python 应用性能管理》主题分享,和大家一同探讨云智慧透视宝是如何保障Python应用在生产环境下的高性能。

针对复杂的IT架构,云智慧采用Backbone分布式监测节点监控,实现系统统一调度监控任务,所有监控点同步执行,依赖可靠的骨干网监测点执行监控任务,技术上消除网络抖动和噪声带来的干扰,稳定可靠的数据可以用于评估SLA。

而部署在应用系统中的智能探针会根据应用系统的语言,自动安装对应的探针程序,并为系统绘制应用拓扑。透视宝Python探针pythonAgent会在框架的RequestHandler添加上下文管理器(context manager),通过Smartpythonagent模块实现上下文管理协议的__enter__ 和 __exit__ 方法控制tracer进程的起始和结束。Tracer进程通过python的sys.settrace库方法进行开启和结束代码的trace过程。

Output模块会对tracer进程返回的代码trace信息进程处理生成我们想要的数据。其中的tree是对代码执行过程以方法名作为节点生成树状的结构,能直接通过tree来还原代码执行时的方法调用过程。而Map则记录tree中每个节点的执行信息,如消耗内存,执行时间等。Output模块处理完数据后会向smartAgent的sendproxy发送数据,最后sendproxy会向透视宝服务器发送数据。 pythonAgent的tracer进程能跟踪到'call', 'line', 'return', 'exception', 'c_call', 'c_return', or 'c_exception'事件。

依托于各种Web轻量级应用框架,Python在Web应用上得到最广泛支持,而透视宝的SmartAgent支持主流的Django、Tornado、CherryPy、Flask、Pylons、Bottle等应用框架,保证Python代码性能数据抓取的准确性和高效能。配合透视宝部署在服务端的其他应用服务监控,包括Apache、Nginx、Tomcat、Weblogic、MySQL、Memcache、Redis、Oracle、MongoDB、PostgreSQL等,开发和运维人员能够第一时间发现应用系统的潜在问题,准确定位应用执行缓慢的真实原因。

如何利用透视宝监控Python应用

用户可以访问透视宝产品网站:http://toushibao.com/ ,申请免费试用帐号,进入应用管理,下载Smart Agent并进行安装,安装完成访问“系统→插件管理”,找到Smart Agent所安装的主机,按以下说明来安装、配置及开启相关代码插件。

1、安装Python应用发现插件

根据Web容器类型安装应用发现插件,该插件可自动发现容器内的所有应用实例并生成应用拓扑图。

1)如果直接使用的Python Server,可以直接跳过本步骤。

2)如果Web容器为Apache

请安装并配置Apache类型的应用发现插件ApacheApp,配置完成后开启插件。

3)如果Web容器是Nginx

请首先在插件的配置界面中选择安装Nginx类型的应用发现插件NginxApp。安装完成之后您还需要配置Nginx插件,与Apache不同的是,此时您需要在主机上手工编译,请参考安装目录中“
./plugins/nginx_path/README”文档。

2、安装并开启Python代码监控插件PythonCode

选择PythonCode插件安装并开启,SmartAgent将自动下载插件至安装目录的smart_agent/plugins下。

默认会使用系统Python进行安装。修改PythonAgent.sh中PythonCommand值,可安装至系统中其他Python环境。

3、重启Web Server

安装开启Python代码监控插件后,可能需要您手动重启web Server(apache\httpd\Nginx\Python Server等软件)。

4、查看Python应用数据

配置完成后,大致两分钟后您就可以在“应用”模块中查看数据。

相关推荐

如何让老师看完文章后还啧啧称奇?满分作文有框架,这3点是关键

历年来语文考试中,作文的分数都占着相当大的一个比例,同时作文也是最容易拉开差距的一个模块。别人拿满分,而你却只有20分左右,分数的差距就是这样拉开的。作文想拿很高的分数却是不容易,但不是完全不可能的事...

小学作文写作技巧和方法,万能公式框架法。家长收藏

小学语文老师用心整理,将写作框架编成万能公式。作文的写作是语文学习中的重要一环,从小学到初中再到高中,作文一直是语文考试中占分比重最高的部分。小学阶段的语文写作相对来说比较简单,主要是打基础,但是很多...

如何用爆款改写技巧提升文章吸引力结构重塑:打破原文框架悬念前

如何用爆款改写技巧提升文章吸引力?结构重塑:打破原文框架悬念前置法-在开头设置悬念或提出反常识的结论,吸引读者注意力。例如,将“接纳不完美是治愈的开始”改写为“天天逼自己当完美超人?别杠了!生活本就...

守护袁昆:是否有必要按框架去写文章,拍摄剪辑视频?

(文/守护袁昆)如今不管是写文章还是剪辑视频,越来越多的朋友喜欢用框架、用脚本,作为互联网创作者,我们是否有必要按框架去写文章,拍摄剪辑短视频呢?其实在内容创作过程中,是否使用框架始终是一个充满争议的...

揭秘!爆款文章的秘密:让读者无法抗拒的文章框架

说说我自己一开始写文章都会犯一个毛病,文章,通常是想到哪里,写到哪里,“管不住字儿”。这样往往会出现以下问题绊住我们继续写下去1、很容易,写着就跑偏了,最终出来的成品和最初的设想偏离很大2、会写得很慢...

想要写出逻辑清晰的文章,你需要掌握哪些写作结构

想要写出好文章,就必须要了解文章的结构和框架。一篇文章结构清晰,读者就很容易跟上作者的思路,看出文章的重点内容。如果你对新媒体的文章有进行过研究,你就会发现很多公众号的文章结构都是类似的。所以你需要掌...

写作结构拆解:从选题到框架,如何让文章说服力翻倍?

你有没有想过,为什么有些文章能轻松获得很高的阅读量,而你的文章却始终无人问津?其实,写出爆款文章并没有想象中那么难。关键在于选择一个吸引人的主题,并用一个清晰的写作框架,通过2-3个有力的子观点支撑...

申论怎么写?结构怎么弄?这篇文章是最基本的好文章框架

写作总被吐槽逻辑混乱?三步搭建框架法,新手也能写出漂亮文章

一、结构决定论:信息传递的桥梁写作者和读者之间始终存在一道隐形的鸿沟。作者脑海中的想法如同一棵枝繁叶茂的大树,但直接倾倒给读者时,往往只剩下零散的枝叶,信息在传达过程中的丢失,作者输出的和读者读到的不...

如何搭建文章框架:新手写作者很有必要看

#头条深一度-深度阅读计划#见面好呀,我是潼臻~37岁,边上班边带娃的二胎妈妈藏起生活里的琐碎,期望你我都能遇到更好的自己~~~~~~~~~~~~~~~~~~果然多读书是可以真切学习到有用的东西最近把...

模型上下文协议(MCP)的可视化向导

最近,模型上下文协议(MCP)引起了广泛关注。你一定听说过它。今天,让我们来了解一下它是什么。直观地说,MCP就像是AI应用的USB-C接口。正如USB-C提供了一种标准化的方式,用于将...

97个人放一页PPT!用对Smartart架构图直接开挂!

从讯飞出差回来的路上,在高铁上看到一条微博,关于红楼梦人物的思维导图:下面很多家长说,帮助很大,能帮助上学的孩子梳理清人物关系,我看了下,清楚是清楚,但真的不太好看!作为一名PPT博主,我就顺带在高...

技术架构规范与实践(二)架构设计示例

1.逻辑架构1.1领域概念1.2宏观应用架构1.3宏观流程1.4微服务拆分与分层2.技术架构3.开发架构3.1后端技术栈分类名称版本描述后端框架/组件JavaJdk8(openjdk:8u342)后...

倾斜柱模板安装加固

1、适用范围:呈梯形逐层向内侧倾斜的框架柱。2、工艺流程:定位放线-配模-校正梁位置-安装加固。3、工艺方法:(1)定位放线首先现场技术管理人员对每颗不同标高的梁底、梁中边线及200mm控制线进行平面...

地基与基础工程、主体工程节点构造

#去班味吧#桩头凿除环切法工艺说明:1、根据桩头预留长度(深入承台10cm)放样桩顶标高,施工人员根据测量结果在基桩上用红油漆标注环切线;2、在切割线以上部分桩底,人工用钢钎打入桩底约15cm,打入时...

取消回复欢迎 发表评论: