教学目标
掌握前端基础,能够从前端代码中获取到有用信息,掌握python数据采集中urllib+xpath方法和分布式爬虫方法,了解数据分析概述,掌握数据分析工具,通过实战加强对工具的使用能力
课程内容
前端
html,css
javascript(一)
javascript(二)
jquery,简单后台管理页面
数据采集
数据采集概述,urllib实现简单爬虫+xpath实现简单解析
数据采集技巧,urllib+xpath采集赶集网租房信息(含图片)
反爬技术,requests模块实现简单爬虫+Beautifulsoup实现简单解析
requests+Beautifulsoup采集数据案例
scrapy环境搭建,原理讲解,简单实现
scrapy数据采集案例
scrapy各模块详解
数据存储(txt,csv,json)
scrapy-redis分布式
数据分析基础
数据分析概述,矩阵相关内容
科学计算库numpy(一)
科学计算库numpy(二)
数据分析工具pandas(一)
数据分析工具pandas(二)
数据分析工具pandas(三)
数据可视化matplotlib(一)
数据可视化matplotlib(二)
案例:金融数据分析,影评数据分析,租房数据分析等
案例:金融数据分析,影评数据分析,租房数据分析等