元干出身书香门第。其父名动，进士出身，官至龙图阁直学士，能诗。张元干受其家风影响，从小聪明好学，永泰的寒光阁、水月亭是他幼年生活和读书处。十四五岁随父亲至河北官廨（在临漳县）已能写诗，常与父亲及父亲的客人唱和，人称之“敏悟”。
画戟如霜，绮疏如水，篆香渐微。向莺花多处，青山衮衮，鹭凫散后，落屑霏霏。曾是鸾台金马客，一场梦觉来人事非。多少话，付无心云叶，自在闲飞。
想看燕鸿易感，□几度春往秋又归。见黄馀露点，东坡菊赋，清传雪片，处士梅诗。向此年年开寿斝，算今古人生七十稀。歌啸外，作皇朝遗老，名字辉辉。