"Ты такая умная, придумай что-нибудь..."

А почему он приезжал на выходные? Вы жили в разных городах? Если этот так - то простите, все закономерно.Когда-нибудь это должно было произойти. Не вините ТОЛЬКО его. В этой ситуации виноваты многие факторы, в первую очередь то, что вы не жили вместе. То, что случилось, повод сесть и подумать, что в вашей семье не так, а не бежать разводиться. Может быть подумать, как все-таки сделать вашу сеью семьей, а не редкими встречами. Может быть ему сменить работу, или вам переехать в тот город, где он работает. Понимаю, что вам очень не легко сейчас и искренне сочувствую, но все-таки советую не рубить с плеча и посмотреть на ситуацию(и на себя в ней!) с разных сторон.