وذكر الهيثم بن عديّ، عن ابن عياش، أن هشاماً أزمع على عزل خالد، وكان سبس ذلك أنه اعتقد بالعراق أموالاً وحفر أنهاراً؛ حتى بلغت غلته عشرين ألف ألف؛ منها نهر خالد، وكان يغلّ خمسة آلاف ألف وباجوّى وبارمان والمبارك والجامع وكورة سابور والصّلح، وكان كثيراً ما يقول: إنني والله مظلوم؛ ما تحت قدميّ من شيء إلا وهو لي - يعني أن عمر جعل لبجيلة ربع السواد.
قال الهيثم بن عديّ: أخبرني الحسن بن عمارة، عن العريان بن الهيثم، قال: كنت كثيراً ما أقول لأصحابي: إنّي أحسب هذا الرجل قد تخلّى منه؛ إن قريشاً لا تحتمل هذا ونحوه؛ وهم أهل حسد، وهذا يظهر ما يظهر، فقلت له يوماً: أيها الأمير؛ إنّ الناس قد رموك بأبصارهم، وهي قريش وليس بينك وبينها إلّ، وهم يجدون منك بداً؛ وأنت لا تجد منهم بداً؛ فأنشدك الله إلا ما كتبت إلى هشام تخبره عن أموالك، وتعرض عليه منها ما أحبّ؛ فما أقدرك على أن تتخذ مثلها؛ وهو لا يستفسدك؛ وإن كان حريصاً على ذلك فلعمري لأن يذهب بعض ويبقى بعض خير من أن تذهب كلها؛ وما كان يستحسن فيما بينك وبينه أن يأخذها كلها، ولا آمن أن يأتيه باغ أو حاسد فيقبل منه؛ فلأن تعطيه طائعاً خير من أن تعطيه كارهاً. فقال: ما أنت بمتهم؛ ولا يكون ذلك أبداً. قال: فقلت أطعني واجعلني رسولك، فوالله لا يحلّ عقدة إلا شددتها، ولا يشدّ عقدة إلا حللتها. قال: إنّا والله لا نعطي على الذلّ، قال: قلتُ: هل كانت لك هذه الضياع إلا في سلطانه؟ وهل تستطيع الامتناع منه إن أخذها؟؟! قال: لا، قلت: فبادره، فإنه يحفظها لك ويشكرك عليها؛ ولو لم تكن له عندك يد إلاّ ما ابتدأك به كنت جديراً أن تحفظه، قال: لا والله لا يكون ذلك أبداً، قال: قلت فما كنت صانعاً إذا عزلك وأخذ ضياعك فاصنعه، فإنّ إخوته وولده وأهل بيته قد سبقوا لك، وأكثروا عليه فيك، ولك صنائع تعود عليهم بما بدا لك، ثم استدرك استتمام ما كان منك إلى صنائعك من هشام. قال: قد أبصرت ما تقول وليس إلى ذلك سبيل. وكان العريان يقول: كأنكم به قد عزل، وأخذ ما له وتجنى عليه ثم لا ينتفع بشيء. قال: فكان كذلك.
قال الهيثم: وحدّثني ابن عيّاش، أنّ بلال بن أبي بردة كتب إلى خالد وهو عامله على البصرة حين بلغه تعتّب هشام عليه: إنّه حدث أمر لا أجد بداً من مشافهتك فيه؛ فإن رأيت أن تأذن لي؛ فإنما هي ليلة ويومها إليك، ويوم عندك، وليلة ويومها منصرفاً. فكتب إليه: أن أقبل إذا شئت. فركب هو وموليان له الجمّازات؛ فسار يوماً وليلة، ثم صلى المغرب بالكوفة؛ وهي ثمانون فرسخاً، فأخبر خالد بمكانه، فأتاه وقد تعصّب، فقال: أبا عمرو، أتعبت نفسك، قال: أجل، قال: متى عهدك بالبصرة؟ قال: أمس، قال: أحق ما تقول! قال: هو والله ما قلت، قال: فما أنصبك؟ قال: ما بلغني من تعتّب أمير المؤمنين وقوله، وما بغاك به ولده وأهل بيته؛ فإن رأيت أن أتعرّض له وأعرض عليه بعض أموالنا، ثم ندعوه منها إلى ما أحبّ وأنفسنا به طيّبة، ثم أعرض عليه مالك، فما أخذ منه فعلينا العوض منه بعد. قال: ما أتّهمك وحتى أنظر؛ قال: إني أخاف أن تعاجل، قال: كلا، قال: إن قريشاً من قد عرفت، ولا سيما سرعتهم إليك قال: يا بلال؛ إني والله ما أعطي شيئاً قسراً أبداً. قال أيها الأمير، أتكلم؟ قال: نعم، قال: إن هشاماً أعذر منك، يقول: استعملتك. وليس لك شيء، فلم تر من الحق عليك أن تعرض عليّ بعض ما صار إليك؛ وأخاف أن يزيّن له حسان النّبطيّ ما لا تستطيع إدراكه، فاغتنم هذه الفترة. قال: أنا ناظر في ذلك فانصرف راشداً. فانصرف بلال وهو يقول: كأنكم بهذا الرجل قد بعث إليه رجل بعيد أتيّ، به حمز، بغيض النفس سخيف الدين، قليل الحياء، يأخذه بالإحن والترات. فكان كما قال.
قال ابن عياش: وكان بلال قد اتخذ داراً بالكوفة، وإنما استأذن خالداً لينظر إلى داره، فما نزلها إلاّ مقيّداً، ثم جعلت سجناً إلى اليوم.
قال ابن عيّاش: كان خالد يخطب فيقول: إنكم زعمتم أنّي أغلي أسعاركم؛ فعلى من يغليها لعنة الله! وكان هشام كتب إلى خالد لا تبيعنّ من الغلاّت شيئاً حتى تباع غلاّت أمير المؤمنين حتى بلغت كيلجة درهماً.
قال الهيثم، عن ابن عياش: كانت ولاية خالد في شوال سنة خمس ومائة ثم عزل في جمادى الأولى سنة عشرين ومائة.