↑↓ 选择 · ↵ 打开 · 共索引 374 篇

    习惯养成记之05

    习惯养成记之05

    ARCHIVE 这篇写于 2017 年,距今 9 年多了。里面的版本、链接和做法可能都已经过时,看的时候留个心眼。

    昨天是习惯养成记的第四天,我又犯了老毛病,在晚上看书的时候不认真,而且还查看了手机消息,需要深刻检讨。

    目前还在看Spark的编程模型,里面的核心:RDD

    • RDD 分区
    • RDD 首选位置
    • RDD 依赖关系
    • RDD 分区计算
    • RDD 分区函数

    创建操作:

    • 并行化集合创建操作
    • 外部存储创建操作

    转换操作:

    • 基础转换操作
    • 键值转换操作

    控制操作:

    行动操作:

    Spark 核心原理

    该部分结合源码进行了讲解和分析,但是Scala代码确实看不懂,以后还要反复学习。

    目前看到消息通信原理、作业执行原理。

    现在只是第一轮了解,所以很多方面确实没有深入,也看不懂,但是我相信随着学习的深入和以后实战的开始,对于现在难以理解的,在后面慢慢就顺了,就好像上大学刚刚开始学高等数学一样。

    ###总结###

    1. 看书不管懂不懂,都要坚持,特别是遇到自己生僻的方向。
    2. 晚上可控性真的很差,一定要克服,一定要改掉坏习惯—上地铁后马上关闭手机网络。

    延伸阅读

    1. 今天为目前国内较大型开源项目提交了PR。后面将会找时间把这个心路历程分享给大家。

    茶歇驿站

    一个让你可以在茶歇之余,停下来看一看,里面的内容或许对你有一些帮助。

    这里的内容主要是团队管理,个人管理,后台技术相关,其他个人杂想。