钱琳对于皇帝的评价还是很中肯的，可以说是其改变了骑兵作战方式，开发出了新的战术。他作为最早加入帅府军并见证了新宋军骑兵的发展历史。
当初在琼州，皇帝利用缴获的几百匹战马开始组建最早的骑兵，但是受限于地理环境和马匹的数量，骑军并没有什么出色的战绩，更多的是充当通信、警卫和仪仗。不过却培养出了第一批骑兵，为此后的发展奠定了基础。
在琼州十余年的岁月中，通过缴获和走私及自身繁育，马匹的增加使新宋军的骑军逐渐成型，组建了数个师属骑兵营和两个骑兵团。可此时的骑军并没有独立作战的能力，在收复江南的战争中大多执行侦察和警戒任务，虽然参与了几次追击作战，可依然是作为辅助力量使用。
不过收复江南后，宋军接管了江南地区蒙元的马场，缴获了数万匹战马，使得骑军迎来了高速发展的机遇，各部骑兵得以大规模扩编。其中吸收了部分俘获的敌军骑兵，通过他们学到了如何驯养战马和骑乘技艺及基本的骑兵战术。
当时骑军的武器主要装备是骑兵刀和燧发骑枪，配属可以伴随骑兵机动火炮营。而这时后使用的战术还很简单，在火炮的支援下向敌阵展开冲击，在进入射程后以燧发枪向敌轮番射击，趁敌队形散乱之际向敌阵突击，使用的武器就只有骑兵刀了。
扩编不久之后骑军就参加了第一次北伐战争，不过此时的骑军依然无法摆脱步军独立作战，但已经可以实施快速机动，承担起掩护军阵两翼，驱逐敌骑袭扰的任务。但进攻时还需要步军炮火支援，所以更多的是与敌骑军对战时使用防守反击的被动战术，被步军笑称为‘拐子马’。
此次发生的唯一一次与敌骑大规模的对战是在扬州城下，当时主力南调执行围歼玉昔帖木儿的战役，留守的兵力不足，迫使骑军不得不承担其拦截突围之敌的任务。
在对战中参战的骑军以御前亲军骑兵旅为主力，其可以称得上是当时宋军中兵员素质最好、战马最为优良，训练最为艰苦的部队，但是在与敌骑军作战中依然没有占到多少便宜，损失十分惨重，战至激烈处皇帝都上马扬刀亲临战阵杀敌，此战可谓胜得十分惨烈。
此战之后，皇帝便禁止骑军在没有有效炮火支援情况下与敌骑对战，并开始反思和总结失利的原因。经过研讨认为在训练和兵员素质上并不输于敌军，不足之处在于骑兵战术运用，并没有与火器有效结合。
大家一致以为燧发枪的射程和杀伤力都优于弓箭，但是在射击时需要双手持枪瞄准，在运动中命中率不高，且考虑到武器的重量、长度，装填的难度和纵马奔驰有可能引燃装药的状况，就不难理解它在骑乘战斗中的用场相当有限。
而蒙元骑兵若是能够承受住己方火枪打击后，其弓箭的优势便可以发挥，尤其是在双方队列接近时，敌军可以连续发射箭矢，甚至娴熟的马弓手可以在三十步内可以接连射出数箭，在这个过程中导致己方只能被动挨打，造成很大的伤亡。
此战后，大宋的骑军就很少与敌正面作战，而是作为机动力量和依托步军战阵作战。同时皇帝设计了一个新的战术，在独立与敌作战时分出一部分骑兵下马作战，对敌进行轮番射击；若敌军退却，则以另一部骑兵追击。如此往复，如波浪一般轮番进攻。
但是这仍然难以解决骑军对战中的劣势，因此在战后皇帝召集骑军诸将商议解决。当时有三个方案，一个是研制适于骑兵使用的火器；另一个是增加盔甲的防御力；再有就是为骑兵添加冷兵器，以增强对战能力。
在经过进一步讨论后，皇帝以为骑军最大的优点就是机动性强，重新换装厚重的盔甲便会增加战马的负担，失去最宝贵的机动性；增加冷兵器作为副武器当下也不现实，一个合格的骑兵本就需要掌握多种技艺，而掌握娴熟的骑射和冷兵器作战技能需要长时间的训练，不利于快速成军。
因此只有从火器上想办法。皇帝对燧发枪再度进行改良，缩短了枪身单手可握，称为手枪。制造了一批交由骑军试用，发现虽然便于马上射击，但是威力小、射程短，依然只能单发，若想在近战中使用就需要配置多把手枪。