《周易》的卦辞爻辞都是从哪里来的，都是从象而来，卦象、爻象、爻位等等观象而来，远取诸物、近取诸身、察天观地注解而来，因此象才是易的最基本的工具，一切皆是象的注解。
所以卦辞爻辞并不是一个卦的所有象意，只是象的一小部分内容，辞只是解读象的思路，用语言把象表达出来，但是不能穷尽象意，为什么这么写辞，怎么取象的，古人并没有系统的论述，后人也没有详细的所以然，因此能读懂易的只能是善于观象取象的少数人，对于我们大部分人来说，都是只知其然不知其所以然。
象也是占卜的基础工具，如果不能读象，那么只能读辞了，但是辞只是象的小部分解读，用于占卜局限性是很大的，因此大衍占卜就被逐渐冷落了，天干地支开始成为主流。
儒学的兴起，使得儒家的思想渗透到了卦辞爻辞当中，对于大衍占卜来说，是一场浩劫，腐儒们不去观象取象，而是把他们的迂腐思想写进了爻辞之中，使得卦辞爻辞无法正常的用来占卜，或许这是古代官方的意图，他们害怕老百姓掌握占卜术，把《周易》列入四书五经，成为科举考试的教材，使得《周易》成为了思想教育的课本，极力排斥它的占卜功能，从而使大衍占卜没落了，被天干地支所取代。
大儒朱熹说，象是理会不得的，一棒子把象封死，幸亏同时期出了个邵康节，救了一把象数，之后在明清时期，虽然也活跃了一些观象取象的大衍占卜家，但是在科举考试的大背景下，在儒家思想主导地位下，象占辞占的功用一直被遏制，从而使大衍占卜术被长期边缘化，面临失传的可能性。
后来讽刺的一幕出现了，外族人高岛用他一生的实战记录，写成了一本书，居然在占卜界流行起来，成为现代大衍占卜者的主读本，而那些经过腐儒们注解的易学书山，没有实战性可言，终将边缘化。
这就是大衍占卜术的时代背景，导致它没落的原因吧。