昨天是习惯养成记的第四天,我又犯了老毛病,在晚上看书的时候不认真,而且还查看了手机消息,需要深刻检讨。

目前还在看Spark的编程模型,里面的核心:RDD

  • RDD 分区
  • RDD 首选位置
  • RDD 依赖关系
  • RDD 分区计算
  • RDD 分区函数

创建操作:

  • 并行化集合创建操作
  • 外部存储创建操作

转换操作:

  • 基础转换操作
  • 键值转换操作

控制操作:

行动操作:

Spark 核心原理

该部分结合源码进行了讲解和分析,但是Scala代码确实看不懂,以后还要反复学习。

目前看到消息通信原理、作业执行原理。

现在只是第一轮了解,所以很多方面确实没有深入,也看不懂,但是我相信随着学习的深入和以后实战的开始,对于现在难以理解的,在后面慢慢就顺了,就好像上大学刚刚开始学高等数学一样。

###总结###

  1. 看书不管懂不懂,都要坚持,特别是遇到自己生僻的方向。
  2. 晚上可控性真的很差,一定要克服,一定要改掉坏习惯—上地铁后马上关闭手机网络。

延伸阅读

  1. 今天为目前国内较大型开源项目提交了PR。后面将会找时间把这个心路历程分享给大家。

茶歇驿站

一个让你可以在茶歇之余,停下来看一看,里面的内容或许对你有一些帮助。

这里的内容主要是团队管理,个人管理,后台技术相关,其他个人杂想。