Vannak tory képviselők, akik szerint a brit miniszterelnöknek hetei lehetnek hátra a posztján.