本文共 1215 字，大约阅读时间需要 4 分钟。
学习内容：
hadoop集群部署与爬虫
学习时间：
2020.12.03 — 2021.2.25
学习产出：
进入学校的大数据工作室已经有3个月了。原本的我只接触过学校给的课程任务，大一学了JAVA，接触了很多编程思想，也为现在奠定了基础，但是大一也还在上高数和英语，专业课程还并不是那么多课程来进行学习，知识面也比较浅，之后校园生活还没有体验多久就开始疫情了，之后一段时间都是在家上的网课，说实话那段时间虽然说专业课课程没有落下，但是真的松懈很多，上课也没办法好好认真去上好，也白白浪费了很多能用来学习的时间，如果那段时间能拿来多学习一些知识来拓展自己的视野那不就更好。算了，现在也还不晚，大二从市郊的校区搬到了市区内的校区，今年课程明显就繁重很多，Hadoop平台部署与运维，Java Web程序设计，数据结构，python，电子技术基础（这就让我有点搞不懂为什么要学这门课了，不感兴趣差点就挂科了），在2020.12.02号那天晚上，对了我本身最早加入的是学校的云计算工作室，但是我发现往后的方向跟我所在的专业方向和我之后自己计划的方向不符合，云计算更多偏向运维方向，而大数据专业更多就是对数据分析。所以那天晚上舍友在宿舍提过是否要加大数据工作室，我有过动摇。想着机会都是自己把握的，退出了云计算工作室加入了大数据工作室，大数据工作室指导老师是我专业课的老师，怎么说呢，刚开始进来无从下手。
这是大数据赛项的学习目录。因为一个赛项只需要一个队三个人，而刚好工作室也组好了。比较可惜的就是没办法参加今年的比赛了，希望参赛的同学加油了！！！这期间从开始折腾集群部署，遇到各种Bug，有过解决了两天难啃的骨头，之后解决之后真的成就感很足！！！这才体会过很多程序员的感受，一步步独立解决独立思考，学会了怎么去做笔记方便之后复习，为什么需要来写博客，怎么查找有价值的信息…不止是自己学，也有很多很厉害的学长带着我来学，教我怎么去使用浏览器，分辨好的搜索引擎，怎么使用GitHub。 Notion这个笔记软件真的做的十分人性化，我也是从大佬那边了解的！！没想到那么顺手
有关notion使用方法的链接，https://zhuanlan.zhihu.com/p/95008649
做完集群部署呢，我现在迷上了爬虫！！！
也是通过爬虫我学了python，前端，网络基础，JS逆向，让我自己充实了起来。 这期间知道了崔庆才老师，韦世东老师，他们在爬虫领域都是有着杰出的成就如果也有学习爬虫的小伙伴可以去关注一下崔庆才老师
https://cuiqingcai.com/archives/ 这是崔庆才老师的个人站点
https://github.com/Germey/Python3-Spider 这是崔庆才老师Github
转载地址：http://gayrf.baihongyu.com/