Nel mio caso, il problema aveva qualcosa a che fare con la versione di Git di Apple. Sto usando zsh e includo il ramo git corrente nella mia riga di comando, quindi git viene eseguito ogni volta che viene generato un nuovo prompt dei comandi. Quando sono passato a utilizzare la versione di Git di Homebrew
brew install git
e aperto un nuovo terminale, il problema è andato via. Non sono sicuro del motivo per cui la versione di git di Apple stava causando l'esecuzione di xcodebuild ogni volta. Questo è stato il bug che mi ha aiutato a capirlo: link