绍圣元年(1094)四月，苏轼落职知英州，秦观被指为影附苏轼随之被贬为杭州通判，道贬监处州酒税。三年，转徙郴州。
绍圣四年（1097年）仲春，新党为了将旧党（元祐党人）赶尽杀绝，朝廷对“元祐党人”的贬地作了一次大规模的调整。所有被贬外地的元祐党人，根据贬所再向更远之地贬一次。因为苏轼在旧党中的地位，已经被贬广东的苏轼，再次被贬到了海南。秦观由郴州转徙到更远的横州(今广西横县)。
秦观于绍圣四年（1097年）在衡州遇到了在这里做知府的孔平仲(毅甫)。孔平仲系与秦观同一批受到贬谪，落职知衡州的，处境与心境大致相同，秦观因向他赠送了旧作《千秋岁》词。
孔平仲他读了这首词以后，认为言语悲伧，作者心中的幽怨太深，恐不久于人世，并步原韵和词一首，
元符三年（1100年）四月，秦、孔二人所作的《千秋岁》经由苏轼的侄孙苏元老传到了远谪琼州的苏轼那里。苏轼有所感，亦作和词一首。