长孙无限忌主要是得罪了武则天，那时候李治想封武则天为后，他死活不同意，所以武后对他恨之入骨。