汉时，把现在新疆一带称为西域。西域有几十个小国。其中有个龟兹国，国王绛宾，曾在汉宣帝时来过汉朝，并曾受到汉朝的款待，留住了一年，回去时还赠送了他许多礼物。以后，他又继续来过几次，对于汉朝有深厚的友谊和好感。
《汉书·西域传》载：这位龟兹国王很喜欢汉朝宫的廷的生活。因此，在他国内也依次着修造起汉式宫殿来，宫中的器物陈设、嫔妃侍从的衣服装饰，以及一切日常制度，也都竭力摹仿汉式；每天也举行朝会，撞钟击鼓，传呼朝拜，同汉朝的仪式相仿。西域各国，见龟兹国行这一套规矩，却都觉得好笑，说是“驴非驴，马非马，倒象是一头骡！”
骡，是驴和马交配而生的，象驴而非驴，象马而又非马，所以叫做“非驴非马”。
“非驴非马”作为一句成语，和“不伦不类”、“不三不四”的意思一样，形容什么也不象。