利用python抓包、爬取裡蕃收藏夹(移动app)数据,整理成API

关于我,欢迎关注
csdn博客:ccapton(http://blog.csdn.net/ccapton) 微信:Ccapton
Github: (https://www.github.com/ccapton)
个人博客:http://www.ccapton.cn

岛国裡蕃Api

岛国裡蕃api数据展示

数据来源:裡蕃收藏夹

裡蕃收藏夹app截图:

自建web站点截图:


本来看看最近的新番的,又重新下载了裡蕃收藏夹,后来发现,它居然直接用webview承载所有页面数据了。
于是便抓了一下包,便是发现了一个很好的爬虫练手机会,加上自己用过flask,便把它的数据呈现出来了

项目地址
https://github.com/Ccapton/python-stuff/tree/master/lifan

技术要点

  • Charles抓包手机网络数据,获取关键用户cookie
  • 携带cookie利用requests获取数据
  • beautifulsoup解析数据
  • peewee微型数据库保存数据
  • flask建立微型web服务器、展示网页站点
  • flask-restful输出json数据

具体细节就请各位到这个项目源码查看了,相信你们都能读懂全部内容

坚持原创技术分享,您的支持将鼓励我继续创作!
0%