Branko Šömen, Razpadanje