Вы не написали, свободен ли ваш возлюбленный. Если нет, значит, у него тоже есть какие-то обязательства перед семьей. И еще большой вопрос: захочет ли он других отношений?
А если он свободен, то, как он отнесется к Вашим детям и примут ли они его? Может для них родной отец - самый большой авторитет. Здесь ведь много нюансов и по одной Вашей фразе нельзя до конца понять вопрос.
С другой стороны: жить с нелюбимым человеком тяжко. Хотя... Может это не "новая" любовь, а простое увлечение. Может, стоит сесть и хорошо во всем разобраться с мужем? Может новый возлюбленный внес в вашу с ним рутинную жизнь поток новых ощущений, которых Вы раньше не испытывали?
Тогда стоит попробовать поговорить с мужем, рассказать о сложностях в ваших отношениях и сообща найти решение? Наша беда в том, что мы мало интересуемся жизнью и проблемами своих родных и близких. От того и возникает чувство одиночества, хочется тепла на стороне, если его нет дома.