施紀賢將於週一確認秋季離任,逾百名工黨議員推動換帥