一、使用的技术栈: 爬虫:python27 requests json bs4 time
分析工具: ELK套件
开发工具:pycharm 二、数据成果
爬取了知乎部分的用户数据信息。
三、简单的可视化分析
1.性别分布 0 绿色代表的是男性 ^ . ^
1 代表的是女性... 拈花古佛 5年前 (2017-07-10) 8379℃ 0评论 1喜欢
为了能够将爬取到的数据存入本地数据库,现在本地创建一个mysql数据库example,然后
在数据库中建立一张表格douban_db,示例如下:
CREATE TABLE `douban_db` (
`url` varchar(20) NOT NULL,
`direc... 拈花古佛 7年前 (2015-07-25) 12771℃ 1喜欢
福利啊福利,本次为大家带来的项目是抓取淘宝MM照片并保存起来,大家有没有很激动呢? 本篇目标
1.抓取淘宝MM的姓名,头像,年龄
2.抓取每一个MM的资料简介以及写真图片
3.把每一个MM的写真图片按照文件夹保存到本地
4.熟悉文件保存的过程
1.URL的格式
在这里我们用到的... 拈花古佛 7年前 (2015-07-09) 6766℃ 0评论 0喜欢