GoogleMap SDK が何やってるかわからないけど、毎フレーム画像の allocate してたりしないかな？さすがにそれはない？ view の変更がある度にレンダリングしてテクスチャ転送ってそんなに重いかな？動画をテクスチャにするのとかよりマシそうな気が。