Во многих курсах, в частности у Зорича, вначале говорится, что для непрерывности в точки функция должна быть определена в окрестности этой точки. Затем переходится к более общему определению непрерывности по области определения, затем по множеству.
Потом идёт непрерывность по базе и т.д. Увлёкся
В общем-то, это терминологические трудности.
Например, некоторые теоремы справедливы для функций, непрерывных на отрезке. При этом, если вводится понятие "непрерывности вообще", то приходится проговаривать лишние слова, что под непрерывностью на концах понимается односторонняя непрерывность. А при определении непрерывности по множеству этих слов можно не говорить.
Вырожденные случаи, вроде непрерывности в изолированных точках, особого интереса не представляют. А с Вашим когнитивным диссонансом тоже несложно разобраться.