Python开发者应该知道的7个开发库

在我多年的 Python 编程经历以及在 Github 上的探索漫游过程中,我发掘到一些很不错的 Python 开发包,这些包大大简化了开发过程,而本文就是为了向大家推荐这些开发包。

十余年的茂名网站建设经验,针对设计、前端、开发、售后、文案、推广等六对一服务,响应快,48小时及时工作处理。全网整合营销推广的优势是能够根据用户设备显示端的尺寸不同,自动调整茂名建站的显示方式,使网站能够适用不同显示终端,在浏览器中调整网站的宽度,无论在任何一种浏览器上浏览网站,都能展现优雅布局与设计,从而大程度地提升浏览体验。创新互联从事“茂名网站设计”,“茂名网站推广”以来,每个客户项目都认真落实执行。

请注意我特别排除了像SQLAlchemy和Flask这样的库,因为其实在太优秀了,无需多提。

下面开始:

1. PyQuery (with lxml)

安装方法 pip install pyquery

Python 解析 HTML 时最经常被推荐的是Beautiful Soup ,而且它的确也表现很好。提供良好的 Python 风格的 API,而且很容易在网上找到相关的资料文档,但是当你需要在短时间内解析大量文档时便会碰到性能的问题,简单,但是真的非常慢。

下图是 08 年的一份性能比较图:

这个图里我们发现 lxml 的性能是如此之好,不过文档就很少,而且使用上相当的笨拙!那么是选择一个使用简单但是速度奇慢的库呢,还是选择一个速度飞快但是用起来巨复杂的库呢?

谁说二者一定要选其一呢,我们要的是用起来方便,速度也一样飞快的 XML/HTML 解析库!

而 PyQuery 就可以同时满足你的易用性和解析速度方面的苛刻要求。

看看下面这几行代码:

 
 
 
 
  1. from pyquery import PyQuery  
  2. page = PyQuery(some_html)  
  3.  
  4. last_red_anchor = page('#container > a.red:last') 

很简单吧,很像是 jQuery,但它却是 Python。

不过也有一些不足,在使用迭代时需要对文本进行重新封装:

 
 
 
 
  1. for paragraph in page('#container > p'):  
  2.     paragraph = PyQuery(paragraph)  
  3.     text = paragraph.text() 

2. dateutil

安装方法:pip install dateutil

处理日期很痛苦,多亏有了 dateutil

 
 
 
 
  1. from dateutil.parser import parse  
  2.  
  3. >>> parse('Mon, 11 Jul 2011 10:01:56 +0200 (CEST)')  
  4. datetime.datetime(2011, 7, 11, 10, 1, 56, tzinfo=tzlocal())  
  5.  
  6. # fuzzy ignores unknown tokens  
  7.  
  8. >>> s = """Today is 25 of September of 2003, exactly  
  9. ...        at 10:49:41 with timezone -03:00.""" 
  10. >>> parse(s, fuzzy=True)  
  11. datetime.datetime(2003, 9, 25, 10, 49, 41,  
  12.                   tzinfo=tzoffset(None, -10800)) 

3. fuzzywuzzy

安装方法:pip install fuzzywuzzy

fuzzywuzzy 可以让你对两个字符串进行模糊比较,当你需要处理一些人类产生的数据时,这非常有用。下面代码使用Levenshtein 距离比较方法来匹配用户输入数组和可能的选择。

 
 
 
 
  1. from Levenshtein import distance  
  2.  
  3. countries = ['Canada', 'Antarctica', 'Togo', ...]  
  4.  
  5. def choose_least_distant(element, choices):  
  6.     'Return the one element of choices that is most similar to element' 
  7.     return min(choices, key=lambda s: distance(element, s))  
  8.  
  9. user_input = 'canaderp' 
  10. choose_least_distant(user_input, countries)  
  11. >>> 'Canada' 

这已经不错了,但还可以做的更好:

 
 
 
 
  1. from fuzzywuzzy import process  
  2.  
  3. process.extractOne("canaderp", countries)  
  4. >>> ("Canada", 97) 

4. watchdog

安装方法:pip install watchdog

watchdog 是一个用来监控文件系统事件的 Python API和shell实用工具。

5. sh

安装方法:pip install sh

sh 可让你调用任意程序,就好象是一个函数一般:

 
 
 
 
  1. from sh import git, ls, wc  
  2.  
  3. # checkout master branch  
  4. git(checkout="master")  
  5.  
  6. # print(the contents of this directory  
  7. print(ls("-l"))  
  8.  
  9. # get the longest line of this file  
  10. longest_line = wc(__file__, "-L") 

6. pattern

安装方法:pip install pattern

Pattern 是 Python 的一个 Web 数据挖掘模块。可用于数据挖掘、自然语言处理、机器学习和网络分析。

7. path.py

安装方法:pip install path.py

当我开始学习 Python 时,os.path 是我最不喜欢的 stdlib 的一部分。尽管在一个目录下创建一组文件很简单。

 
 
 
 
  1. import os  
  2.  
  3. some_dir = '/some_dir' 
  4. files = []  
  5.  
  6. for f in os.listdir(some_dir):  
  7.     files.append(os.path.joinpath(some_dir, f)) 

但listdir在os而不是os.path中。

而有了path.py ,处理文件路径变得简单:

 
 
 
 
  1. from path import path  
  2.  
  3. some_dir = path('/some_dir')  
  4.  
  5. files = some_dir.files() 

其他的用法:

 
 
 
 
  1. >>> path('/').owner  
  2. 'root' 
  3.  
  4. >>> path('a/b/c').splitall()  
  5. [path(''), 'a', 'b', 'c']  
  6.  
  7. # overriding __div__  
  8. >>> path('a') / 'b' / 'c' 
  9. path('a/b/c')  
  10.  
  11. >>> path('ab/c').relpathto('ab/d/f')  
  12. path('../d/f') 

是不是要好很多?

原文链接:http://www.oschina.net/question/12_78983

当前题目:Python开发者应该知道的7个开发库
文章起源:http://www.shufengxianlan.com/qtweb/news27/511427.html

网站建设、网络推广公司-创新互联,是专注品牌与效果的网站制作,网络营销seo公司;服务项目有等

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联