2022年个人总结
1. 工作
今年的工作内容按照上半年、下半年分成了两块内容:
上半年的主要精力还是在大数据实时计算上,对实时计算平台、底层架构、FlinkSQL都做了较大升级,整体上还算满意。美中不足的是Flink任务的资源动态扩缩容这个项目,由于精力不足没能亲力亲为,我司的导师制度出发点我非常喜欢,现在看来还是虎头蛇尾了。
6月份经历了一次组织的变动,当时触动还是比较大的。有那么两周我经常陷入很多问题的反思中,比如工作方法、结果导向、收益如何汇报等等,最后的结论是:坚持自我、持续学习。
下半年增加了负责任务调度系统,面临的是非常古老、重要且一直无人下定决心重构的一套系统。工作重心也从实时转到了离线这块,感觉成长还是比较大的。也促使我不断思考FlinkSQL和HiveSQL的区别(提交、编译D...
Divide And Conquer-读《大脑减压的子弹笔记术》
最近读了基本工作效率、笔记的书,总结都有几个共同点:
1. 想清楚目标最重要
所有的行动源于目标,目标清晰了,才能快速判断行动的优先级、取舍。
如果没有想清楚目标,只是照着去罗列清单,即使都能够完成了,也不会有太多的成就感;而且注定会完不成,越积累越多。
作者举了归纳的例子,如果只是一股脑不分类的收纳到一个地方,在需要的时候还是找不到,而且很快又变乱了。
2. MECE 原则分解目标
将目标分解为需要做的的事情,创建一个系统,罗列出所有的分解项。
一旦分解完成,清空你的大脑,开始专注于具体某一个分解项。大脑之所以感觉累,是因为总在担心事情有遗漏、其他事情什么状况,反而做不好现在手头的工作。所以分解时尽可能做到 MECE,分解后集中精力进入“心流”的状态。
读这本书的时候...
心流者,事竟成-读《只管去做》
用4个番茄钟就能看完,非常推荐的一本小书。
几年前看《单核工作法》,其中的冥想、集草器的方法让我受益匪浅。最近在看《搞定》,总觉得过于理论,可操作性不强。
而《只管去做》这本书的第一章也提到了《搞定》这本书,我将这本书看做是《搞定》的实际操作版本。再加上工作方法也必须考虑本土化的问题,比如996大小周、以短视作为务实等背景,因此更推荐先按照本书实践,有些心得之后再去看理论版本。
1. 心流
聚精会神这种状态,其实在上学期间并不少见,经常两道数学题目下来,45分钟就过去了。究其原因,主要是强制的规律与清晰地目的使然:
规律:每节课固定时间,中间穿插休息;排课时,课程穿插安排,避免一直沉浸在一个学科里。
目的:考出好的成绩,每个学科想要达到多少分。
而工作后这种状态非...
学习学习的方法-读《西蒙学习法》
赫伯特·亚历山大·西蒙(Herbert Alexander Simon)是20世纪科学界的奇才,他获得过诺贝尔经济学奖,也获得过图灵奖,获得过美国心理学会终身贡献奖,还有美国政治科学学会麦迪逊奖。
从这些奖项中就可以看到西蒙学习的范围很广,这本书就是在讲西蒙的学习方法。
不过需要吐槽的是,作者更多只是借了西蒙的名字。学习方法基本都是自己的经验之谈,例子净是些国内高考美国高校录取之类的例子。。。还充斥大量图片骗页数。。。
1. 这本书的结构
西蒙学习法的 Why-What-How
学问方向很多,应该学习什么?
定好方向后,在这个方向的目标是什么?
如何学习:拆分、集中精力、掌握技巧。
2. 目标、技巧
2.1 目标
目标很重要,这个世界上的知识浩如烟海。...
战略思维+专业思维-读《麦肯锡结构化战略思维》
十一假期读完的一本书,之前看《麦肯锡教我的写作武器》、《麦肯锡精英高效阅读法》,都是日本人所著。
当时就很想知道,国人对于麦肯锡的工作经验是如何总结的,这本书读起来更加的贴近现实、感同身受,收益更多。
1. 为什么需要结构化战略思维
“焦虑”在 VUCA 时代蔓延.
虽然有贩卖焦虑的嫌疑,不过看现实社会确实大多数人是焦虑的。生产力进步了这么多,可是生产关系并没有发生变化。普通人仍然要为柴米油盐、衣食住行焦虑。
如今鸡汤泛滥、付费知识层次不齐,似乎看看大咖的跨年演讲,就一下子能醍醐灌顶一般。可是实际上,仍旧只是被动接受知识拒绝思考,成为一个“沙发土豆”(Couch Potato).
人们天性上都习惯做吃瓜群众,拒绝思考。我想起来小时候放了暑假,有那么几十天晚上吃了饭都要去摸知...
想明白,写出来-读《麦肯锡教我的协作武器》
最近在找基本麦肯锡的书籍看,上一本是愿我们都在白底黑字中读懂自己-读《麦肯锡精英高效阅读法》,教我们如何读书的。今天读完的这本则是《麦肯锡教我的写作武器》。
1. 想明白、写出来
这本书主要是在教商务写作,如何通过文档清晰的说清楚问题以及解决方案。实际上,工作中的文档都应该按照这个思路写,有两个好处:
想明白了,写的过程并不复杂,不用担心写文档会浪费时间。实际上因为想不清楚就动手开干,浪费的时间会更多。
尽可能降低人员流动带来的接手成本,文档在手,系统不愁。
当然,实际上真实情况未必如此,对于非典型技术驱动的公司来说,文档不用写,先满足业务需求再说;系统复杂,文档写的烂,人员对模块的熟悉程度反而成了核心竞争力;文档和实现不一致,南辕北辙。。。
不过我们还是来看看,...
最高贵的品质-读《七种武器》
《七种武器》这本书,在大学时看过一次,这种将人的品质和武器联系到一起的奇特写法,让人印象深刻。
有时候我觉得困惑的时候,就会看看武侠。因为其中人物的成长像是历史传记,却又多了一些浪漫色彩。是人的品质还是武器,才使他成为了江湖中人口中的“他”。
长生剑🗡,写的是笑,乐观的精神。
所以我说的第一种武器,并不是剑,而是笑,只有笑才能真的征服人心。
所以当你懂得这道理,就应该收起你的剑来多笑一笑!
孔雀翎🦚,写的是信心。
无论多可怕的武器,也比不上人类的信心。
所以我说的这第二种武器,并不是孔雀翎,而是信心!
碧玉刀,写的是诚实。
所以我说的这第四种武器,并不是碧玉七星刀,而是诚实。只有诚实的人,才会有这么好的运气。
多情环,写的是仇恨。
仇恨...
Flink - SQL Window 简介
如果说 Flink 里 FlatMap Filter 这些算子,还只是简单的在MapReduce思想上的扩展。那么 Window 机制,则是真正的在乱序、无界的实时流处理的一个核心设计。Window 的切分与触发,跟数据量、时间、watermark有关,又依赖着状态保证数据的准确性,在 Flink 里是非常典型同时比较复杂的一环。
这篇笔记从简单的 SQL 里对 Window 的使用,开始逐步介绍下 Window 机制。
1. Windows
Tumbling Windows 窗口相邻不重叠。
用实际例子说明下窗口是如何划分的,比如下面的输入数据:
izual,http://izualzhy.cn,1970-01-01 00:00:01
izual,http://izua...
226 post articles, 29 pages.