在千锋上海Python培训学习的日子过的非常快,现已经进入到第四阶段。对于第三阶段的学习内容,我希望通过回顾的方式进行梳理,让自己有个更好的进步。
千锋上海Python培训第三阶段,我系统学习了爬虫以及数据分析。通过爬虫的学习,我了解了scrapy框架,了解到Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架以及爬虫的相关原理知识,爬虫主要是爬取url链接,通过链接进一步的爬取。引擎会从调度器中取出链接用于接下来的信息抓取,引擎会把URL封装成一个请求并将请求传给下载器,下载器负责把资源下载下来,并封装成一个应答包,爬虫则解析Response,解析出实体(Item),则交给实体管道进行进一步的处理,如果解析出的是链接(URL),则把URL交给调度器等待抓取。自己现在也可以爬取一些简单的网站,自己收获也颇多。
自己需要学习的东西还有很多,不会的东西也有很多,虽然有些东西会用了,但对底层的东西并不了解,掌握的深度还不够,例如反爬以及反反爬。数据分析的方法较多一些,自己对算法逻辑这块完全弄不懂了,只是了解了点皮毛,并没有深入的弄懂里面的原理,特别是算法。
现在,我已经进入到了千锋上海Python培训的第四阶段,也就是意味着自己即将正式进入就业周,希望自己通过认真的努力,做好基础的回顾,特别是面试题的准备工作,争取拿到一个更好的高薪Offer。
相关文章
了解千锋动态
关注千锋教育服务号
扫一扫快速进入
千锋移动端页面
扫码匿名提建议
直达CEO信箱