--cache-buildsはbootstrapとかupdateなどのビルドする系のコマンドで、必要なければビルドしない、というためのものですが、verifyはそもそもビルドする必要があるかどうかを判定するだけのコマンドで、Xcodeのビルドフェーズなどに組み込む事を想定しています。前者をビルドフェーズに入れてしまうと、キャッシュが有効ではないと判断されると、突然ライブラリのビルドも始まってしまってめちゃくちゃ、という感じですかね。