C# 图像计算如何加速？

VS2008 C#写的代码，读入图像，然后用像素值和已有的权值计算加权平均值。发现一幅512*512的影像都速度比较慢，有没什么加速的策略呢？

用C#的指针,使用不安全代码段