Eu desativei o loop, mas o problema da perda de qualidade persistiu. Decidi tirar o AudioStreamPlayer do bus que eu tava usando pra mudar o pitch e o volume, e o problema desapareceu. Descobri que o problema tem alguma coisa a ver com o efeito de PitchShift, porque foi só adicionar ele ao bus Master que o problema voltou na hora.
Tem chance de isso ser um bug na engine, ou sou eu que não sei usar, mesmo?