Python的主流框架详解(一)（python的常用框架）

Scrapy：Python的爬虫框架。

Scrapy是一个使用Python编写的，轻量级的，简单轻巧，并且使用起来非常的方便。

Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。

scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如BaseSpider、sitemap爬虫等，最新版本又提供了web2.0爬虫的支持。

Zerorpc：基于ZeroMQ的高性能分布式RPC框架。

Zerorpc是一个基于ZeroMQ和MessagePack开发的远程过程调用协议（RPC）实现。和 Zerorpc 一起使用的 Service API 被称为 zeroservice。Zerorpc 可以通过编程或命令行方式调用。

rpc使构建分布式系统简单许多，在云计算的实现中有很广泛的应用 。

rpc可以是异步的

python实现rpc，可以使用标准库里的SimpleXMLRPCServer，另外zerorpc是第三方库支持rpc

zerorpc 是基于 ZeroMQ 和 MessagePack，速度相对快，响应时间短，并发高。

特点：不用修改代码即可显露python模块；通过命令行远程调用这些模块。

Buildbot：基于Python的持续集成测试框架。

Buildbot是一个开源框架，可以自动化软件构建、测试和发布等过程。每当代码有改变，服务器要求不同平台上的客户端立即进行代码构建和测试，收集并报告不同平台的构建和测试结果。

BuildBot是一个系统的自动化编译/测试周期最需要的软件，以验证代码的变化。通过自动重建和测试每次发生了变化的东西，在建设迅速查明之前，减少不必要的失败。有警告计数， 图像大小，编译时间，以及其他参数，随着时间的推移可进行跟踪，让信息变得更明显，因此更容易得到改善。

Buildbot是一个持续集成系统，自动构建/测试周期。通过自动重建和测试树每次事情发生了变化，迅速构建的问题被查明之前，其他开发人员带来不便的故障。

Diesel：基于Greenlet的事件I/O框架。

Diesel提供一个整洁的API来编写网络客户端和服务器。支持TCP和UDP。

注解：Greenlet是python的一个C扩展，旨在提供可自行调度的‘微线程’， 即协程。generator实现的协程在yield value时只能将value返回给调用者(caller)。 而在greenlet中，target.switch（value）可以切换到指定的协程（target）， 然后yield value。greenlet用switch来表示协程的切换，从一个协程切换到另一个协程需要显式指定。

Flask：一个用Python编写的轻量级Web应用框架

Flask是一个使用Python编写的轻量级Web应用框架。基于Werkzeug WSGI工具箱和Jinja2 模板引擎。Flask也被称为“microframework”，因为它使用简单的核心，用extension增加其他功能。Flask没有默认使用的数据库、窗体验证工具。

Cubes：轻量级Python OLAP框架

Cubes是一个轻量级Python框架，包含OLAP、多维数据分析和浏览聚合数据（aggregated data）等工具。

Cubes的主要特性之一是它的逻辑模型，抽象物理数据并提供给终端用户层。

Kartograph.py：创造矢量地图的轻量级Python框架。

Kartograph是一个Python库，用来为ESRI生成SVG地图。Kartograph.py目前仍处于beta阶段，你可以在virtualenv环境下来测试。

Pulsar：Python的事件驱动并发框架

Pulsar是一个事件驱动的并发框架，有了pulsar，你可以写出在不同进程或线程中运行一个或多个活动的异步服务器。

Pulsar作为一个实时和近实时大数据分析处理系统，包含了Pulsar Pipeline和Pulsar Reporting

Pulsar Reporting 是一个基于大数据的可扩展和可定制的可视化平台， 用户通过Pulsar 可以提供更为清晰直观的数据洞察力，将错综复杂的数据和数据之间的关系，通过图形的形式呈现出来，从而给用户带来实时的洞察力和有效的决策力。同时Pulsar Reporting 也提供了非常友好的数据交互体验以及从宏观到微观的灵活切换，从而为用户对数据进行实时多角度分析和可视化成为可能。

Bottle: 微型Python Web框架。

Bottle是一个简单高效的遵循WSGI的微型python Web框架。说微型，是因为它只有一个文件，除Python标准库外，它不依赖于任何第三方模块。

整个框架只有一个文件，几十K，却自带了路径映射、模板、简单的数据库访问等web框架组件，确实是个可用的框架。初学web开发可以拿来玩玩，其语法简单，部署也很方便。