唐僧师徒五人是观音根据其五行相生相克的原理挑选出来的取经人，唐僧五行属水、孙悟空五行属金、猪八戒五行属木、沙僧五行属土、白龙马五行属火，五人是不可或缺的，少一人也不行。
但是在西天取经路上，唐僧却三次赶走了孙悟空。第一次是悟空刚出五行山不久，因打六贼被赶；第二次是悟空三打白骨精之后被赶；第三次是悟空打了两个毛贼被赶。悟空第三次被赶之后，若是没有如来的担保，估计还会被唐僧赶第四、五、六次。唐僧步步有难，处处该灾，为何再三赶走孙悟空？
皆因观音三句话。在第十二回，观音为了寻找到合格的取经人，与唐皇李世民说了重要的三句话。
第一句，观音菩萨道：“这袈裟，龙披一缕，免大鹏吞噬之灾；鹤挂一丝，得超凡入圣之妙。但坐处，有万神朝礼；凡举动，有七佛随身。”这便是观音赠给唐僧的锦襕袈裟，竟有七佛随身，足见有多厉害！
第二句话，菩萨道：“我这锡杖，是那铜镶铁造九连环，九节仙藤永驻颜。入手厌看青骨瘦，下山轻带白云还。摩呵五祖游天阙，罗卜寻娘破地关。不染红尘些子秽，喜伴神僧上玉山。”此杖正是唐僧手上的九环锡杖，曾伴摩呵五祖游天阙，与罗卜闯地狱，其厉害之处，不言于喻。
第三句话，观音临走时，落下一张简帖，颂曰：“礼上大唐君，西方有妙文。程途十万八千里，大乘进殷勤。此经回上国，能超鬼出群。若有肯去者，求正果金身。”这便是对唐僧最大的诱惑，只要他能到西天，即可正果金身，成佛了。
正因为观音说了前两句话，唐僧在取经路上，什么也不怕，反倒是孙悟空怕这里怕那里有妖。所以唐僧他不怕没有悟空跟随，没有他一样可以到西天。正因为观音说了第三句话，唐僧担心悟空误了自己成佛的大事。所以综合三个原因，唐僧总觉得悟空碍手碍脚的，不适合做个取经人。因此，悟空一但有不顺他的地方，他便动不动要赶悟空走。
说实话，唐僧也是一路赌气西行，在第一次孙悟空杀六贼时，就赌气上了；一直到如来辨认真假悟空后，两人才冰释前嫌，同心同德。以下便是笔者找到的一些蛛丝马迹：
第十四回 ，因孙悟空杀六贼，唐僧埋怨了一下悟空。悟空受不得人气，一气就走。唐僧道：“这厮！这等不受教诲！我但说他几句，他怎么就无形无影的，径回去了？罢！罢！罢！也是我命里不该招徒弟。”虽然西天取经刚开始，但是唐僧内心觉得已经不需要孙悟空了，自认为自己一人也可以到达灵山取回真经。
第二十七回，回目就写着“尸魔三戏唐三藏，圣僧恨逐美猴王”，一个“恨”字，说明唐僧对孙悟空已经讨厌到了极点。所以悟空三打白骨精之后，唐僧说悟空全无一点慈悲之心，做不得和尚，并写了一纸贬书，递于悟空道：“猴头！执此为照，再不要你做徒弟了！如再与你相见，我就堕了阿鼻地狱！”
第五十六回「神狂诛草寇，道昧放心猿」西天取经之路已经过半，唐僧又因孙悟空杀了两个毛贼，而“道昧”赶走了悟空。唐僧道：“屡次劝你，更无一毫善念，要你何为！快走！快走！免得又念真言！”悟空再三被赶走，所谓事不过三，他便一路筋斗云，无影无踪了。
第五十八回「二心搅乱大乾坤，一体难修真寂灭」许多人认为此“二心”说的是孙悟空的，笔者却认为“二心”是指唐僧。因为唐僧一路西来，都有二心排斥悟空，主要是觉得悟空到处杀生，会阻碍或影响到他取经成佛。而六耳猕猴实际是唐僧的二心，在第五十九回里就明确写到：“话表三藏遵菩萨教旨，收了行者，与八戒沙僧剪断二心，锁猿马，同心戮力，赶奔西天。”剪断的正是唐僧的二心。
所以说，唐僧为何再三赶走孙悟空？皆因观音三句话，一路赌气西行。
我来答
徐临祥
LV.7 2020-3-24
第1次是刚开始的时候,他杀了几个强盗然后回去了
第2次是白骨精陷害,然后不得以回去了
第3次是真假孙悟空的时候回去的
总共3次
一开始是孙悟空刚拜唐僧为师的时候，因为他杀了六个强盗，唐僧不满，责怪于他，悟空一气之下离开唐僧，前往东海龙宫。后来被东海龙王劝回去，结果被唐僧戴上了紧箍咒。
后来就是三打白骨精，孙悟空打死了白骨精，唐僧却受猪八戒的撺掇，认为悟空害的是好人，将悟空逐走。再后来就是“真假美猴王”那一回，孙悟空打死了几个强盗，被唐僧逐走，
后来六耳猕猴假扮悟空攻击唐僧，最后被如来佛祖识破。悟空离开总共只有这三次，其中第一次没有回花果山，后面两次回了花果山。所以他总共只回过两次花果山。