ありがとうございます！無事にビルドすることができました！！

$ swift build -Xcxx=-I/usr/local/include/opencv4 -Xlinker=-L/usr/local/lib -Xlinker=-lopencv_core -Xlinker=-lopencv_imgproc -Xlinker=-lopencv_imgcodecs …省略