钦天监掌观察天象，推算节气，制定历法。古人相信天象改变和人事变更直接对应，因此钦天的地位十分重要。钦天监设有监正一人，主簿一人。春夏中秋冬五官正。除此之外，还有五官灵台郎，五官保章正，五官挈壶正，五官监侯，五官司历，五官司晨等，若以满员算，钦天监比之六部一点也不遑多让。
但实际上，如今的钦天监，除了袁天罡之外，就只有必须得有的春夏中秋冬五官正。一共六个人，多一个都没有。原因很简单，一个字，穷。
大唐刚刚立国，需要用钱的地方太多了。李世民是一个务实的天子，一面是军事民生，一面是求天问卜，他自然要把钱花在更实用的地方。
不止是李世民，李渊在位的时候，也是这么做的。
帝王对于天意的看法是非常矛盾的。就拿李渊来说，当年他想要起兵的时候，犹豫不决。这时唐俭客串了一把钦天监，对李渊说：“您长相有日角龙廷，姓氏又合乎图谶，久系天下人望。如果外招豪杰，北连戎狄，右收燕、赵，渡河南下，占据秦、雍之地，必能成就与商汤、周武一样的大业。”
李渊信了，随后他起兵了。但彼时隋炀帝还没死，隋朝的钦天监也还在，比唐俭可要专业得多。难道他们看不出来天下要归李唐了么？
他们当然看不出来，谁也看不出来。隋末反王比比皆是，势力大过李渊者不胜凡举，谁知道李渊能成事。初时，天下人都以为李密能成事，但后来却是李渊攻破了长安，这谁能算得出来。
就连说出这话的唐俭，他也根本不是算出来的。而是当时天下各地都在造反，而他唐家与李家交好人所共知，他如果想要辅佐，只能辅佐李渊，所以他才说了这么一段话。
而李渊当真是相信了么？也不尽然。他到底还是自己想起兵，唐俭的话只是一个借口而已。有了这个托词，以后史书上便会记上一笔，我李渊受命于天，不是我想起兵，而是我必须得这么做，救万民于水火。
当年刘邦斩白蛇，也是一样的故事。
由此可以得出结论，李渊其实不信天意，他如果真的信天意，怎么会造天子的反呢？
但是当李渊登基之后，情况就反转了过来。他开始信天意了，因为他已经是皇帝，和之前的所有皇帝一样，他也想让天下人觉得，他是受命于天的天子。所以他必须要信，也不得不信。
因此李渊再次设置了钦天监，但他心中又明白，所谓的天意，不过就是给皇帝背锅而已。没有不行，但太过重视也没用。因此李渊在位之时，钦天监便也如现今这样，六个人，需要的时候，钦天监来个天降祥瑞。万一点背来个彗星，钦天监也得想办法糊弄过去，实在糊弄不过去了，皇帝下个罪己诏，念叨一下自己的过失，大体也就是如此了。
李世民登基之后，把李渊在位时的钦天监官员都撤换了。他不得不换，因为他的老爹没驾崩，他实际上是篡位。虽然他也不是一个信天意的人，但是百姓们相信，他就必须得把钦天监换成自己的人，想方设法让百姓相信，他便是天选之人，他篡位登基是天意。
袁天罡在民间素有声望，被视为神仙中人。于是李世民让他担任钦天监，是想借他的名声，来巩固自己的地位。
但其实，他们早就认识。俩人的相识，还要追溯到大唐立国之初。
大唐建立后，疆土只限于关中和河东一带，尚未完全统治全国，四处都是反王，如刘武周，宋金刚，王世充，窦建德等。若说天下将归属李唐，还为时尚早。