2021-08-19
2021-01-23
2020-11-13
2020-02-21
一个hadoop container内存不足的问题 有更新!
在做项目的时候遇到了一个 hadoop container 内存不足的问题,带着几个问题进行了相应调试,最终通过调大 reduce 和 Java 内存,让问题得到了解决。
2020-02-09
2019-12-14
离线环境下搭建python运行环境 有更新!
首先讲一下这里的业务场景:离线环境。对于一些数据安全要求很高的环境,比如生产环境,通常会处于一个隔离区。在这里,是连不上外网的。而且在这样的机器上,往往也没有root权限。因此,在这样的环境下,本来安装升级lib的工作,就会变得比较复杂。这篇文章,就以这样的场景为背景,以我碰到的一个具体的问题来阐述如何解决类似的问题。
2019-12-01
Shell脚本的书写
对shell脚本不熟悉的同学看来,shell只是一系列的命令,但是只有真正熟悉之后,才能了解到它的强大,尤其是对文本\文件的各种便利化处理,以及它天生更linux系统结合的特性,使它成为一种高效的脚本利器。
2019-11-28
2019-11-17
2019-11-17
PowerMock入门 有更新!
在项目的测试代码中,有一段测试是测试一段网络程序的代码。经常因为网络不稳定,返回不同的结果,而造成整个项目测试的行覆盖率和分支覆盖率的变化。因为commit的提交。
最后实在受不了了,用powermock把网络爬取数据的一段在测试的时候用mock实现了
2019-11-12
2019-10-30
2019-10-29
1
共 1 页