Я понимаю, что наши взаимоотношения ненормальные

Не надо себе придавать большего значения в его жизни, чем есть на самом деле. Судя по всему, не так Вы ему и нравитесь.

я здесь вижу вот такие моменты : 1. вы не хотите отношений, но вас к нему тянет. - отсюда понятно, что хоть вас к нему тянет но все равно у вас ничего серьезного не выйдет.
2. у него есть девушка, а он пошёл к вам "на лево" - отсюда под подозрением его честность вообще.

Мне представляется, что раз вы на него всерьёз не рассчитываете, вам надо говорить с ним так, чтобы постпвить его на место на котором он находится- занятого парня- это будет честнее и избавит вас от глупых ситуаций типичных для тройничков. Типа "ты что, ***, у тебя девушка есть, а ты к другой подкатываешь". У вас же все равно с ним ничего не выйдет - ну дак хоть направить того на правильный образ мыслей