كان من أصحاب الامام الجواد (عليه السلام) و كان الامام موسي بن جعفر (عليه السلام) قد اشتراه و أباه و امه و أعتقهم، و اتخذ الامام موسي بن جعفر (عليه السلام) أحمد بن ابي خلف كاتبا له.