揃えたほうがいいでしょうね　サンプルサイズが大きければ正規性を仮定した検定を使えばいいんじゃないでしょうか。