熙宁四年（1071年）苏轼上书谈论新法的弊病。王安石很愤怒，让御史谢景在皇帝跟前说苏轼的过失。苏轼于是请求出京任职，被派往杭州任通判。同年十二月，苏轼游孤山访惠勤惠思后作此诗。