Если преиодически тянет на лево, значит тебе этот молодой человек вовсе не нужен, тут и думать нечего, и, помни, что на жалости отношения не построишь. Помучается недельку, потом найдет себе другую.
Пять лет - это конечно срок большой. Но, это скорее всего привычка, а не влюбленность и вовсе не ЛЮБОВЬ.
Бросай привычку, и занимайся настоящими чувствами. Порви отношения - отпусти и его и себя. Тратить целых пять лет на привычку из жалости - очень глупо.