なるほど…！OpenCV をビルドするときに OPENCV_GENERATE_PKGCONFIG を ON にし忘れた（はず）なので、pkg-config を使う方法は初めから考えていませんでした。ですがこの方法も試してみたいと思います