20 и 24 -- это не очень сравнимые объективы. Фокусные расстояния (и снимки) отличаются очень сильно. То есть, линзы не взаимозаменяемые и по хорошему, стоит иметь объективы обоих фокусных расстояний
Если есть в них обоих потребность.
У вас есть 24-85 и возможность купить 20 "прямо сейчас" -- просто походите с камерой полчаса-час и подумайте, какое фокусное расстояние нужнее.