任左拾遗时，白居易认为自己受到喜好文学的皇帝赏识提拔，故希望以尽言官之职责报答知遇之恩，因此频繁上书言事，并写大量的反应社会现实的诗歌，希望以此补察时政，乃至于当面指出皇帝的错误。白居易上书言事多获接纳，然而他言事的直接，曾令[[唐宪宗]]感到不快而向[[李绛]]抱怨：“白居易小子，是朕拔擢致名位，而无礼于朕，朕实难奈。”李绛认为这是白居易的一片忠心，而劝谏宪宗广开言路。<ref>[http://www.todayonhistory.com/people/201508/10407.html 白居易简介]</ref>

815年，宰相[[武元衡]]遇刺身亡，白居易上表主张严缉凶手，被认为是越职言事。其后白居易又被诽谤：母亲看花而坠井去世，白居易却着有“赏花”及“新井”诗，有害名教。遂以此为理由贬为江州（今江西九江）司马。818年，白居易的弟弟[[白行简]]至江州与白居易相聚。当白居易被任命为忠州刺史时，白行简也一同与兄长溯江而上。途中与[[元稹]]相遇于黄牛峡，三人相游之处被称为三游洞。在忠州任职的时间，白居易在忠州城东的山坡上种花，并命名此地为“东坡”。同年冬，被任命为忠州（今重庆市忠县）刺史，819年到任。820年夏，被召回长安，任尚书司门员外郎。

白居易的母亲虽因看花坠井去世，然而白居易早有许多咏花之作，而依宋代的纪录，新井诗作于元和元年左右（新井诗今已失传），可见此事不能构成罪名。他被贬谪的主因，很可能与他写讽谕作品而得罪当权者有关。贬谪江州是白居易一生的转折点：在此之前他以“兼济”为志，希望能做对国家人民有益的贡献；至此之后他的行事渐渐转向“独善其身”，虽仍有关怀人民的心，表现出的行动却已无过去的火花了。然而白居易在江州虽不得志，大体上仍能恬然自处，曾在庐山香炉峰北建草堂，并与当地的僧人交游。