数据科学中一些不常用但很有用的Python库

导读

提到数据科学的python包，大家想到的估计是numpy，pandas，scikit-learn之类的，这里给大家介绍一些不常用，但是非常有用的python包，就像是痒痒挠，虽然大部分时间用不上，但是真要用起来，还是挺爽的。

创新互联专注为客户提供全方位的互联网综合服务，包含不限于成都网站建设、成都网站设计、渭城网络推广、成都小程序开发、渭城网络营销、渭城企业策划、渭城品牌公关、搜索引擎seo、人物专访、企业宣传片、企业代运营等，从售前售中售后，我们都将竭诚为您服务，您的肯定，是我们最大的嘉奖；创新互联为所有大学生创业者提供渭城建站搭建服务，24小时服务热线：028-86922220，官方网址：www.cdcxhl.com

Python是个了不起的语言。事实上，这是世界上发展最快的语言之一(感觉没有之一，就是最快的)。在数据科学领域和开发领域，一次又一次的为我们提供便利。整个Python的生态和库使之成为所有用户都适用(初学者和高级用户)。Python之所以这么成功，原因之一就在于它的库，让Python变得灵活快速。

这篇文章中，我们会看一些不太常用的数据科学的库，除了pandas，scikit-learn，matplotlib等。尽管说到数据科学，我们想到的就是pandas和scikit-learn，了解一下其他的python的库也没什么坏处。下面就是另外一些数据科学中可能会用到的Python库。

Wget

从网络获取数据是Python科学家非常重要的任务。Wget是一个免费的工具，可以从Web上非交互式的下载文件，支持HTTP, HTTPS, 和 FTP协议，同样支持HTTP代理。由于是非交互式的，所以可以后台运行，用户没有登录也可以。所以下次你需要从网上下载图片的时候，可以试试wget。

安装:

 
 
 
 
    
  
  
  
  
  1. $ pip install wget
    2.

例子:

 
 
 
 
    
  
  
  
  
  1. import wget
    2. 
  
  
  
  
  2. url = 'http://www.futurecrew.com/skaven/song_files/mp3/razorback.mp3'
    3. 
  
  
  
  
  3. filename = wget.download(url)
    4. 
  
  
  
  
  4. 100% [................................................] 3841532 / 3841532
    5. 
  
  
  
  
  5. filename
    6. 
  
  
  
  
  6. 'razorback.mp3'
    7.

Pendulum

这个是干啥的呢，你在处理日期时间的时候搞得头大的时候，Pendulum就很适合你，这包是用来简化日期时间的操作的，具体使用可以看 这里 。

安装:

 
 
 
 
    
  
  
  
  
  1. $ pip install pendulum
    2.

例子:

 
 
 
 
    
  
  
  
  
  1. import pendulum
    2. 
  
  
  
  
  2. dt_toronto = pendulum.datetime(2012, 1, 1, tz='America/Toronto')
    3. 
  
  
  
  
  3. dt_vancouver = pendulum.datetime(2012, 1, 1, tz='America/Vancouver')
    4. 
  
  
  
  
  4. print(dt_vancouver.diff(dt_toronto).in_hours())
    5. 
  
  
  
  
  5. 3
    6.

imbalanced-learn

大多数的分类问题中，当所有的类别中的样本的数量大致相同时，效果是最好的，也就是样本均衡。但是在实际情况中，往往都是非均衡的数据，这往往会影响训练的过程以及后面的预测。幸好，这个库可以帮我们解决这个问题。这个和scikit-learn兼容，是scikit-learn-contrib的一部分。下次可以试试。

安装:

 
 
 
 
    
  
  
  
  
  1. pip install -U imbalanced-learn
    2. 
  
  
  
  
  2. # or
    3. 
  
  
  
  
  3. conda install -c conda-forge imbalanced-learn
    4.

例子:

请参考文档。

FlashText

在清洗NLP相关的数据的时候，往往需要替换一些关键词或者提取一些关键词。通常，可以用正则表达式来干这个活，不过正则条件的数量上千的时候，就会很头大。FlashText是基于FlashText算法的一个模块，提供了这种情况下的一个替代工具，FlashText最好的地方在于运行时间是和搜索的条件的数量不相关的。更多的信息可以看这里。

安装:

 
 
 
 
    
  
  
  
  
  1. $ pip install flashtext
    2.

例子:

提取关键词

 
 
 
 
    
  
  
  
  
  1. from flashtext import KeywordProcessor
    2. 
  
  
  
  
  2. keyword_processor = KeywordProcessor()
    3. 
  
  
  
  
  3. # keyword_processor.add_keyword(, )
    4. 
  
  
  
  
  4. keyword_processor.add_keyword('Big Apple', 'New York')
    5. 
  
  
  
  
  5. keyword_processor.add_keyword('Bay Area')
    6. 
  
  
  
  
  6. keywords_found = keyword_processor.extract_keywords('I love Big Apple and Bay Area.')
    7. 
  
  
  
  
  7. keywords_found
    8. 
  
  
  
  
  8. ['New York', 'Bay Area']
    9.

替换关键词

 
 
 
 
    
  
  
  
  
  1. keyword_processor.add_keyword('New Delhi', 'NCR region')
    2. 
  
  
  
  
  2. new_sentence = keyword_processor.replace_keywords('I love Big Apple and new delhi.')
    3. 
  
  
  
  
  3. new_sentence
    4. 
  
  
  
  
  4. 'I love New York and NCR region.'
    5.

Fuzzywuzzy

名字听起来怪怪的，不过在字符匹配的时候，用起来还是爽爽的。可以轻松的实现字符比例，token比例等。还可以在不同的数据集中进行匹配。

安装:

 
 
 
 
    
  
  
  
  
  1. $ pip install fuzzywuzzy
    2.

例子:

 
 
 
 
    
  
  
  
  
  1. from fuzzywuzzy import fuzz
    2. 
  
  
  
  
  2. from fuzzywuzzy import process
    3. 
  
  
  
  
  3. # Simple Ratio
    4. 
  
  
  
  
  4. fuzz.ratio("this is a test", "this is a test!")
    5. 
  
  
  
  
  5. 97
    6. 
  
  
  
  
  6. # Partial Ratio
    7. 
  
  
  
  
  7. fuzz.partial_ratio("this is a test", "this is a test!")
    8. 
  
  
  
  
  8.  100
    9.

PyFlux

时间序列的处理是机器学习领域经常遇到的问题。PyFlux就是专门用来处理时间序列问题的开源Python库。这个库里有一系列的时间序列模型如ARIMA, GARCH 和VAR 等。简单来说，PyFlux提供了时间序列到概率的建模，值的一试。

安装

 
 
 
 
    
  
  
  
  
  1. pip install pyflux
    2.

例子

参考这里 。

Ipyvolume

交流结果是数据科学的非常重要的方面。结果可视化是个非常重要的优势。IPyvolume是个3D可视化库，不过这还是在pre-1.0的阶段，可以这样类别一下， IPyvolume是对3维数据的可视化，matplotlib是对二维数据的可视化。具体可以看 这里。

安装

 
 
 
 
    
  
  
  
  
  1. Using pip
    2. 
  
  
  
  
  2. $ pip install ipyvolume
    3. 
  
  
  
  
  3. Conda/Anaconda
    4. 
  
  
  
  
  4. $ conda install -c conda-forge ipyvolume
    5.

例子

  • 标记
  • 渲染

Dash

这是个创建web应用的用户生产的Python框架。基于Flask写的，可以用来构建数据可视化的app，这些app可以在网络浏览器上渲染。用户手册可见 这里.

安装

 
 
 
 
    
  
  
  
  
  1. pip install dash==0.29.0 # The core dash backend
    2. 
  
  
  
  
  2. pip install dash-html-components==0.13.2 # HTML components
    3. 
  
  
  
  
  3. pip install dash-core-components==0.36.0 # Supercharged components
    4. 
  
  
  
  
  4. pip install dash-table==3.1.3 # Interactive DataTable component (new!)
    5.

例子

Gym

Gym来自OpenAI，用来做强化学习。兼容所有的数值计算库，如TensorFlow，Theano等。这个库提供了一个问题测试的环境，你可以用这个环境来实验你的强化学习算法。这些环境共享界面，使你可以写通用的算法。

安装

 
 
 
 
    
  
  
  
  
  1. pip install gym
    2.

例子

结论

这是我选的一些有用但是不常用的python库，如果你知道其他的话，可以继续添加，别忘了先试试。

网页名称：数据科学中一些不常用但很有用的Python库
本文地址：http://www.shufengxianlan.com/qtweb/news34/61934.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联

猜你还喜欢下面的内容

手机网站建设知识

同城分类信息

高端定制网站设计　　 　新都四新网站建设　　 　四川艺考培训　　 　商城系统开发　　 　网站优化公司　　 　眉山托管服务器　　 　成都花箱厂家　　 　成都做网站　　 　眉山服务器租用　　 　传美奇电气　　 　平山县网站建设　　 　成都网站维护　　 　网站定制　　 　雨棚定制　　 　成都网站建设哪家好　　 　微信小程序开发　　 　网站改版维护　　 　成都翻译公司　　 　自适应网站　　 　叙永网站建设