- 发布于2021-12-17 11:00:02
我的 2021 最难忘瞬间丨疫情让我们距离变远,却让心更近了
今年发生了很多事情,其中「最难忘瞬间」当属这张照片。受到疫情影响人与人之间的距离变远了,最明显的体现就是交通工具上产生的「社交距离限制」,正如这张照片里椅子上的「允座」和「禁座」。不过虽然疫情让我们的距离变远,但却让心更近了。赞 2评论 1浏览 1158 - 发布于2021-12-17 15:31:21
我的2021最难忘瞬间 |离家
依稀记得小时候特别不喜欢呆在家里,只想着出去玩,上学都比在家感觉要好,但是今年却感觉非常念家 ~~~ 第一次落地北京的人们大多数都是兴奋的吧,我也是这样的心情,但慢慢的念及亲人朋友,心中难免多上一丝挂念。所以要说出个“最”难忘,那大概还是离家。 2021...赞 4评论 1浏览 1120 - 发布于2021-12-16 20:13:44
gpfdist优化
使用 gpfdist 加载外部表,是我们不可或缺的数据批量加载技术。 单进程的服务有一定约束,并且在文件服务器带宽有限的情况下,gpfdist 难以达到理想速度。有开发者基于 gpfdist 做了多线程切分文件和分发文件的实现 lotus,并利用 ZSTD...赞 2评论浏览 1298 - 发布于2021-12-08 18:34:42
LittleBoy最佳实践样例:SQL算子介绍
在对数据进行预处理的过程中,我们可能需要根据需求对数据进行各种操作,而现有的数据处理算子不一定能满足我们的处理需求,此时我们就可以使用 SQL 算子自定义 SQL 进行数据处理,SQL 算子完全支持 SQL 相关的语法,可简单灵活的进行数据处理操作,方便工...赞 3评论 2浏览 1290 - 发布于2021-12-09 12:24:54
LittleBoy最佳实践样例:数据处理算子介绍
熟悉数据挖掘和机器学习的小伙伴们都知道,数据处理相关的工作时间占据了整个项目 70% 以上。数据的质量,直接决定了模型的预测和泛化能力的好坏。它涉及很多因素,包括:标准型、完整性、一致性、时效性、可信性和解释性。而在真实数据中,我们拿到的数据可能包含了大量...赞 1评论浏览 1089 - 发布于2021-12-08 10:35:48赞 2评论 2浏览 1057
- 发布于2021-12-02 15:32:20
4.1. safe mode
➢ 分析 当收到来自 datanode 的状态报告后,namenode 根据配置,确定 可用的 block 占总数的比例。 可用的数据节点数量符合要求之后,离开安全模式。 ➢ 解答 如果有必要,也可以通过命令强制离开安全模式:hadoop dfsadmi...赞 1评论浏览 834