Он (Левий), оставив всё, встал и последовал за Ним.

Оставив всё "оставив свою работу" - то, чем он занимался.