с сильно урезанной и скудной математической программой. Физикой не занимался.
Понятно. Тогда кратко и просто.
Как представлять себе комплексные числа? - Как пары действительных, с определенными операциями над ними.
Зачем нужны комплексные числа? - Чтобы решать задачи, которые без них не решаются. В том числе задачи, где и в условии, и в ответе фигурируют только действительные числа. В том числе из физики. См., например, метод комплексных амплитуд в теории колебаний.
Какие задачи? - Ссылку дали выше.
Что делать с тем, что я не могу представить себе комплексные числа так же легко и естественно, как действительные? - Ничего. Привыкайте.
В математике много абстрактных объектов. И чем дальше изучаешь математику, тем их больше. Комплексные числа - это цветочки. А вот как насчет бесконечномерных пространств? Или пространств, где нет расстояний между точками, но это все равно разные точки, а не одна? Я уж не говорю про какие-нибудь, прости господи, недостижимые кардиналы. Хотите изучать математику - привыкайте.