• 欢迎访问1024小神,一个只会Python的程序猿不是一个好司机
  • 有什么想对我说的可以在留言板里给我留言哦~
  • 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏1024小神吧

开始你的第一个爬虫吧

豆瓣读书的爬虫,方便大家搜罗各种美美书

豆瓣读书的爬虫,方便大家搜罗各种美美书
豆瓣读书爬虫Python所写,豆瓣读书的爬虫,方便大家搜罗各种美美书!更新今年年初又爬了一遍豆瓣图书数据,爬下了3000000+条目,这次爬的时候特意爬取了每个图书页面中的“喜欢读XX的人也喜欢条目XX”,最近对数据进行了处理和可视化做了这个新的WebApp(随意取名书海星空),WebApp的截图如下。书海星空WebApp中每本书作为一个节点包含评……继续阅读 »

1024小神 10个月前 (12-05) 448浏览 5评论2个赞

慕课网爬虫:160万用户报告

慕课网爬虫:160万用户报告
1 慕课网介绍慕课网——www.imooc.com,是垂直的互联网IT技能免费学习网站。以独家视频教程、在线编程工具、学习计划、问答社区为核心特色。在这里,你可以找到最好的互联网技术牛人,也可以通过免费的在线公开视频课程学习国内领先的互联网IT技术。慕课网课程涵盖前端开发、PHP、Html5、Android、iOS、Swift等IT前沿技术语言,包括基础……继续阅读 »

1024小神 10个月前 (12-05) 467浏览 3评论1个赞

Python爬虫:听中国有声小说批量下载 v0.3

Python爬虫:听中国有声小说批量下载 v0.3
目标站点:更新内容1.上个版本只支持有声书,这个理论上支持听中国上的所有音频(包括有声书,评书,相声等),但未全部测试大概率会有不能下载的py文件和exe文件下载链接:https://www.lanzous.com/i8m05xi使用方法1.输入目录页链接,如https://www.tingchina.com/pingshu/disp_1742.……继续阅读 »

1024小神 10个月前 (11-26) 717浏览 1评论1个赞

用Python爬网站数据,并用BI可视化分析

用Python爬网站数据,并用BI可视化分析
数据分析的过程如同烧一顿饭,先要数据采集(买菜),然后数据建模(配菜)、数据清洗(洗菜)、数据分析(做菜)、数据可视化(摆盘上菜)。所以第一步,要采集/选择数据。一、Python爬取智联招聘岗位信息(附源码)选择智联招聘,通过Python来进行“BI工程师”的关键数据信息的爬取,这里大家也可以试着爬取自己岗位的关键词,如“数据分析师”、“java开发工……继续阅读 »

1024小神 1年前 (2020-09-06) 659浏览 3评论1个赞

起点小说网全站爬虫(Python)

起点小说网全站爬虫(Python)
网络文学随互联网的崛起而崛起,在时间日益碎片化的今天,网络文学以其方便快捷的特点适应了人们的娱乐性需求,因而也快速成长一个巨大的市场。娱乐是人们的根本性需求,文化是这个过程中的附属品。要想知道人们关心的是什么?什么又在兴起,哪些题材又在逐渐没落,我们需要从整体去分析。因此这个爬虫也就应运而生,我们选取了目前国内最大的小说平台——起点网作为数据来源。本爬虫……继续阅读 »

1024小神 1年前 (2020-08-30) 309浏览 0评论0个赞