Судя по построению вашего вопроса, вы уже знаете как быть, просто ищите повод или оправдание. Очень похоже, на обратную сторону этого вопроса:
http://chtodelat.com/q/8917, почитайте, возможно наведёт некоторую ясность.
Понятно, что насильно мил не будешь. Заставлять себя быть с кем-то без любви — смысла нет. Главное — быть уверенным, что это не временное помешательство, а всё реально изменилось. Ну и завершение отношений в таком случае должно быть достойным. Вы же в любви друг другу признавались, становиться врагами после этого — как-то не по человечески.
Только подумайте 100 раз, прежде чем жечь все мосты. Попробуйте поговорить с вашим парнем на чистоту. Расскажите всё, что Вас не устраивает. Выслушайте, что не устраивает его. Попробуйте сначала проблему решить. Ведь 4 года, всё же что-то между Вами было. Вам нужно понять, что и насколько оно Вам дорого. А уже только после этого принимать решение.