风物长宜放眼量

互联网的动荡,如果说为了收缩成本,不如说为了整合资源,尤其整合人力资源。

从个人来说,迎合变化,调整姿态,控制负债,面对不确定冲击保留余地是有必要的。“毕业”可以是个人、业务、部门、组织,垮塌性的倾轧是比较恐怖的,极限压测之下,才能看到真正的成色。

牢骚太盛防肠断,风物长宜放眼量。

终究无法逃脱时空的禁锢,心态放平,积赞能力、积累技能是有必要的。我们无法直接改变过去,但至少活在当下,影响未来是可以的。

加油吧!

风物长宜放眼量

写篇文章

blog是久远的存在,现在变成年更了,所幸部署在腾讯lighthouse的wordpress费用比较低。不过,年底要不要续费,得想想。

毕竟,2022年,是个互联网动荡的年份,很多同学在4月份被迫毕业。用毕业代替“裁员”的表达,在互联网圈,亏了老板们的创新。

毕竟,互联网,是个爱创造概念的行业。

今天早上起来,各大银行发来生日祝福短信,嗯,跟信用卡催还款一样准时,感谢 浦发、招商、工商,感谢中国联通...

有个同事打趣说,勤更blog或者公众号,是为了找工作吧。简历上的东西,太容易虚张声势了,不如blog或者公众号的阅读量实在。在理。

写篇文章,记录下不平凡的4月份,有个作家写了沸腾10年、沸腾再10年,估计后续该写沸腾30年了,优化裁员是个行业印记,值得被记上一笔。

当然,最重要的是,今天是名义上的生日。感谢祝福。

写篇文章

Something you don’t know

林语堂说,人生中幸福之一是跟自己的小孩玩耍,这点不假。

互联网下班晚,但每每到家两个小朋友一窝蜂般涌过来还是让人开心的。

人生的幸福感来自快乐+满足感。闹腾的小朋友是能够让你很快忘记工作的烦恼并参与其中的。

满足感往往来自认可。小朋友迟迟不睡等待你的归来,然后一手拧着小枕头一手拿着小兔子玩具过来找你,说要找你陪着睡觉,嗯,虽然每天陪着时间少,被认可感觉真好。

Something you don’t know

spark中的stage和task

提交spark任务之后,在yarn中可以看到以下任务页面:

我们需要分析每个job的执行情况,所以需要弄清楚stage、task的分配。在spark中RDD生成的任务构成DAG,由DAGScheduler管理,RDD可以切分成不同的stage,每个stage提交到taskScheduler进行调度执行,每个task由executor执行。总体如下图:

executor的资源配置决定了总体的执行效率。计算较慢可以观察executor的总体资源占用情况。

spark中的stage和task