Wie du schon schreibst, wählst du den PITCH LFO als source. Und sofern eben die (Pitch-) Intensity dieses PITCH LFOs für seine ursprüngliche Bestimmung größer 0, dann moduliert er ja auch die Pitch, nicht nur die Wavetable Position :)
Entweder unterbindest du die Pitch Intensity des LFOs, oder...