当时外国作家经常点名求见赵树理，但林绍纲邀请他时总是被拒绝。一次，他终于答应了，穿着布鞋、胡子拉碴地随团出访，住宾馆非硬板床不睡，只好让他锁上门睡地板。别人在台上讲话，他不爱听了就去洗手抽烟，边哼哼山西上党梆子。看晚会总是睡着，甚至打起呼噜。

每次出访，林绍纲要组织人员为代表团成员订做西装和中山装、准备发言稿等。按照杨朔要求，代表团出访期间，他总是留在国内负责后勤。直到1979年，才有机会第一次随团出国。

《中国高质量国际论文数世界第二 多所高校进入前10》风口浪尖上，冯牧被调来作协担任文艺报副主编。他培养的很多作家都成了右派，但他幸运地躲了过去。林绍纲也很担心自己被戴上帽子，幸而过关。