【无标题】

本文介绍了螺旋数理论,通过引入满足 (I^2 = -N) 的新虚单位 (I),将复数推广为具有各向异性特性的螺旋数 (\mathbb{C}_N)。螺旋数能同时描述旋转与伸缩,其几何表现为等角螺线,适用...
1周前
60

2、Spark 函数_a/b/c

本文介绍了Spark SQL中的多个数学和加密函数,包括: 基础数学函数:abs(绝对值)、acos(反余弦)、acosh(反双曲余弦) 日期函数:add_months(添加月份) 高级加密函数:ae...
1周前
60

掌握大数据领域数据架构,开启数据新征程

随着企业每天产生TB级甚至PB级数据(比如电商的用户点击、物流轨迹、交易记录),如何让这些“数据碎片”变成可决策的“黄金”?答案是设计一套科学的数据架构。本文将覆盖大数据架构的核心组件(数据湖、仓库...
2周前
60

Spark shuffle 和 MapReduce shuffle 的区别

shuffle 的字面意思是洗牌、混洗的意思,就是把一组有规律的数据尽量打乱成无规律的数据。但在 MapReduce 中 Shuffle 更像是洗牌的逆过程,其将 Map 端输出的混乱数据按指定规则划...
2周前
60