Python小白都会的如何生成词云图片

很早之前写过一篇怎么利用微博数据制作词云图片出来，之前的写得不完整，而且只能使用自己的数据，现在重新整理了一下，任何的微博数据都可以制作出来，放在今天应该比较应景。

成都创新互联公司主营荣县网站建设的网络公司,主营网站建设方案,app开发定制,荣县h5小程序开发搭建,荣县网站营销推广欢迎荣县等地区企业咨询

一年一度的虐汪节，是继续蹲在角落默默吃狗粮还是主动出击告别单身汪加入撒狗粮的行列就看你啦，七夕什么样的礼显得特别，程序猿可以试试用一种特别的方式来表达你对女神的心意，有一个创意是把她过往发的微博整理后用词云展示出来发给她。本文教你怎么用Python快速创建出有心意词云，Python小白也能分分钟做出来。

准备工作

本环境基于Python3，理论上Python2.7也是可行的，先安装必要的第三方依赖包：

 
 
 
 
    
  
  
  
  
  1. # requirement.txt
    2. 
  
  
  
  
  2. jieba==0.38
    3. 
  
  
  
  
  3. matplotlib==2.0.2
    4. 
  
  
  
  
  4. numpy==1.13.1
    5. 
  
  
  
  
  5. pyparsing==2.2.0
    6. 
  
  
  
  
  6. requests==2.18.4
    7. 
  
  
  
  
  7. scipy==0.19.1
    8. 
  
  
  
  
  8. wordcloud==1.3.1
    9.

requirement.txt 文件中包含上面的几个依赖包，如果用 pip 方式安装失败，推荐使用 Anaconda 安装

 
 
 
 
    
  
  
  
  
  1. pip install -r requirement.txt
    2.

第一步：分析网址

打开微博移动端网址 https://m.weibo.cn/searchs ，找到女神的微博ID，进入她的微博主页，分析浏览器发送请求的过程

打开 Chrome 浏览器的调试功能，选择 Network 菜单，观察到获取微博数据的的接口是 https://m.weibo.cn/api/container/getIndex ，后面附带了一连串的参数，这里面有些参数是根据用户变化的，有些是固定的，先提取出来。

 
 
 
 
    
  
  
  
  
  1. uid=1192515960&
    2. 
  
  
  
  
  2. luicode=10000011&
    3. 
  
  
  
  
  3. lfid=100103type%3D3%26q%3D%E6%9D%8E%E5%86%B0%E5%86%B0&
    4. 
  
  
  
  
  4. featurecode=20000320&
    5. 
  
  
  
  
  5. type=user&
    6. 
  
  
  
  
  6. containerid=1076031192515960
    7.

再来分析接口的返回结果，返回数据是一个JSON字典结构，total 是微博总条数，每一条具体的微博内容封装在 cards 数组中，具体内容字段是里面的 text 字段。很多干扰信息已隐去。

 
 
 
 
    
  
  
  
  
  1. {
    2. 
  
  
  
  
  2.     "cardlistInfo": {
    3. 
  
  
  
  
  3.         "containerid": "1076031192515960",
    4. 
  
  
  
  
  4.         "total": 4754,
    5. 
  
  
  
  
  5.         "page": 2
    6. 
  
  
  
  
  6.     },
    7. 
  
  
  
  
  7.     "cards": [
    8. 
  
  
  
  
  8.         {
    9. 
  
  
  
  
  9.             "card_type": 9,
    10. 
  
  
  
  
  10.             "mblog": {
    11. 
  
  
  
  
  11.                 "created_at": "08-26",
    12. 
  
  
  
  
  12.                 "idstr": "4145069944506080",
    13. 
  
  
  
  
  13.                 "text": "瑞士一日游圆满结束...",
    14. 
  
  
  
  
  14.             }
    15. 
  
  
  
  
  15.         }]
    16. 
  
  
  
  
  16. }
    17.

第二步：构建请求头和查询参数

分析完网页后，我们开始用 requests 模拟浏览器构造爬虫获取数据，因为这里获取用户的数据无需登录微博，所以我们不需要构造 cookie信息，只需要基本的请求头即可，具体需要哪些头信息也可以从浏览器中获取，首先构造必须要的请求参数，包括请求头和查询参数。

 
 
 
 
    
  
  
  
  
  1. headers = {
    2. 
  
  
  
  
  2.     "Host": "m.weibo.cn",
    3. 
  
  
  
  
  3.     "Referer": "https://m.weibo.cn/u/1705822647",
    4. 
  
  
  
  
  4.     "User-Agent": "Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) "
    5. 
  
  
  
  
  5.                   "Version/9.0 Mobile/13B143 Safari/601.1",
    6. 
  
  
  
  
  6. }
    7. 
  
  
  
  
  7. 
  
  
  
  
  8. params = {"uid": "{uid}",
    9. 
  
  
  
  
  9.           "luicode": "20000174",
    10. 
  
  
  
  
  10.           "featurecode": "20000320",
    11. 
  
  
  
  
  11.           "type": "uid",
    12. 
  
  
  
  
  12.           "value": "1705822647",
    13. 
  
  
  
  
  13.           "containerid": "{containerid}",
    14. 
  
  
  
  
  14.           "page": "{page}"}
    15.
  • uid是微博用户的id
  • containerid虽然不什么意思，但也是和具体某个用户相关的参数
  • page 分页参数

第三步：构造简单爬虫

通过返回的数据能查询到总微博条数 total，爬取数据直接利用 requests 提供的方法把 json 数据转换成 Python 字典对象，从中提取出所有的 text 字段的值并放到 blogs 列表中，提取文本之前进行简单过滤，去掉无用信息。顺便把数据写入文件，方便下次转换时不再重复爬取。

 
 
 
 
    
  
  
  
  
  1. def fetch_data(uid=None, container_id=None):
    2. 
  
  
  
  
  2.     """
    3. 
  
  
  
  
  3.     抓取数据，并保存到CSV文件中
    4. 
  
  
  
  
  4.     :return:
    5. 
  
  
  
  
  5.     """
    6. 
  
  
  
  
  6.     page = 0
    7. 
  
  
  
  
  7.     total = 4754
    8. 
  
  
  
  
  8.     blogs = []
    9. 
  
  
  
  
  9.     for i in range(0, total // 10):
    10. 
  
  
  
  
  10.         params['uid'] = uid
    11. 
  
  
  
  
  11.         params['page'] = str(page)
    12. 
  
  
  
  
  12.         params['containerid'] = container_id
    13. 
  
  
  
  
  13.         res = requests.get(url, params=params, headers=HEADERS)
    14. 
  
  
  
  
  14.         cards = res.json().get("cards")
    15. 
  
  
  
  
  15. 
  
  
  
  
  16.         for card in cards:
    17. 
  
  
  
  
  17.             # 每条微博的正文内容
    18. 
  
  
  
  
  18.             if card.get("card_type") == 9:
    19. 
  
  
  
  
  19.                 text = card.get("mblog").get("text")
    20. 
  
  
  
  
  20.                 text = clean_html(text)
    21. 
  
  
  
  
  21.                 blogs.append(text)
    22. 
  
  
  
  
  22.         page += 1
    23. 
  
  
  
  
  23.         print("抓取第{page}页，目前总共抓取了 {count} 条微博".format(page=page, count=len(blogs)))
    24. 
  
  
  
  
  24.         with codecs.open('weibo1.txt', 'w', encoding='utf-8') as f:
    25. 
  
  
  
  
  25.             f.write("\n".join(blogs))
    26.

第四步：分词处理并构建词云

爬虫了所有数据之后，先进行分词，这里用的是结巴分词，按照中文语境将句子进行分词处理，分词过程中过滤掉停止词，处理完之后找一张参照图，然后根据参照图通过词语拼装成图。

 
 
 
 
    
  
  
  
  
  1. def generate_image():
    2. 
  
  
  
  
  2.     data = []
    3. 
  
  
  
  
  3.     jieba.analyse.set_stop_words("./stopwords.txt")
    4. 
  
  
  
  
  4. 
  
  
  
  
  5.     with codecs.open("weibo1.txt", 'r', encoding="utf-8") as f:
    6. 
  
  
  
  
  6.         for text in f.readlines():
    7. 
  
  
  
  
  7.             data.extend(jieba.analyse.extract_tags(text, topK=20))
    8. 
  
  
  
  
  8.         data = " ".join(data)
    9. 
  
  
  
  
  9.         mask_img = imread('./52f90c9a5131c.jpg', flatten=True)
    10. 
  
  
  
  
  10.         wordcloud = WordCloud(
    11. 
  
  
  
  
  11.             font_path='msyh.ttc',
    12. 
  
  
  
  
  12.             background_color='white',
    13. 
  
  
  
  
  13.             mask=mask_img
    14. 
  
  
  
  
  14.         ).generate(data)
    15. 
  
  
  
  
  15.         plt.imshow(wordcloud.recolor(color_func=grey_color_func, random_state=3),
    16. 
  
  
  
  
  16.                    interpolation="bilinear")
    17. 
  
  
  
  
  17.         plt.axis('off')
    18. 
  
  
  
  
  18.         plt.savefig('./heart2.jpg', dpi=1600)
    19.

简单四步就完成了，最终效果图：

完整代码可以回复“qixi”获取，对了，还有上周的送书活动已经结束，明天会公布获奖的朋友们。

分享名称：Python小白都会的如何生成词云图片
分享地址：http://www.shufengxianlan.com/qtweb/news19/529619.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联

猜你还喜欢下面的内容

商城网站知识

分类信息网

成都移动服务器托管　　 　名片设计　　 　网站维护　　 　西部信息中心　　 　网站设计　　 　香港云虚拟主机　　 　成都电商解决方案　　 　成都茶叶销售　　 　航空文化传媒　　 　微信公众号开发　　 　东方电机技改服务有限公司　　 　wap手机网站　　 　金融行业网站建设方案　　 　手机网站建设公司　　 　国泰民安消防　　 　定制网站　　 　关键词优化排名　　 　营销型网站　　 　德阳电信机房　　 　成都企业网站设计