有做大数据方向的专家吗,请教几个问题

img


主要用到的就是spss excel mysql还有python 我想请问图里面说的那些点都是在哪里应用的。尤其是后面两个,平滑和滤波,极限和峰值。。我十分不理解还找不到资料😭😭

比如说有一个一维数据,[1,2,3,6,7,8] 除了3和6其余两个相邻的数字相差1,所以3到6就显得非常尖锐,简单的平滑就是求均值来代替(3+6)/2=4.5那么将6换为4.5是不是就显得不那么突兀了,至少从原来相差3个单位变成了相差1.5和2.5了。滤波就是过滤的意思,平滑本身也是滤波的一种它是将一些尖锐的波形削平了一丢丢,当然其他滤波也是可以,比如你只想要这个一维数组中的最大值8 那么相当于将前面几个元素都过滤掉了。极限的话是高数的概念,放到大数据里应该也是大差不差,你看一下高数的课本就行开篇前面讲的全是。峰值就是字面意思,在一段数据中最大的那个就是峰值。

平滑和滤波是傅立叶变换的应用。
傅立叶变换是把含有多种周期信号的波形转换成频域图。过滤掉不要频率(比如代表噪音的高频),再进行傅立叶逆变换。原来的波形就会过滤掉不需要的杂音。这就是滤波。平滑就是过滤掉高频部分剩下的波形就会变平滑。