說到這里，霍英東突然轉談其它問題。他說自己也不知道這些謠言從何而來，這很難讓人置信。他應該對造謠者有所猜測，但可能不便講出來就是了。
謠言據說是行家散布
為了多了解一些有關這段往事的情況，那天和霍英東交談結束後，我又找來霍氏集團的老職員凌漢偉，向他旁敲側擊。以下，就是我與他的談話內容——
“為什麼當時會傳霍生被遞解出境？”
“我猜可能與朝鮮戰爭生意有關。霍生在朝鮮戰爭時做的生意，內地和香港的看法並不相同。”
“是港府真的有所表示要遞解他出境，還是有行家搞鬼？”
“霍生都說連他都不知道。”
“港府有沒有警告之類的話，或者與他打過什麼招呼？”
“這個問題，那就要霍生本人答複你了。我記得，當時有人還問我：‘你們那間公司穩不穩陣？’”
“買家對霍生的公司的信心有否動搖？”
“有些擔心，所以我們登報紙澄清此事。這件事還是我經手的，應該還有報紙可查。”
“按照你們當時的分析，謠言從何而來？”
“這個霍生也搞不清楚……我估是空穴來風，可能是朝鮮戰爭時候支持內地，給別人這樣的聯想。”
“朝鮮戰爭時期，或以後，港府有無與霍生就他的朝鮮戰爭時向內地運送物資的事談過、接觸過？”
“這個我就不很清楚了，應該是沒有談過這個問題。”
凌漢偉對這個問題也不是很想談，所以我們的談話到此便匆匆結束。
後來，我又向一些人了解此事。據說，這些謠言的出現，並非空穴來風，而是一些地產商人有意散布的。有人說，霍英東當時可能無意間得罪了一些同行。比如有地產商因資金周轉不靈而向霍英東借錢，但霍英東快人快語，說什麼：“原來你經濟這樣困難，欠人那麼多錢，付那麼多利息，那不等于一日不見一兩間樓……”諸如此類的無心快語，可能令一些行家反感，行家因而散布這個謠言，希望霍英東亦沒有好日子過。
如果這些傳聞源自港英當局，那可能是與霍英東在朝鮮戰爭時與內地方面有貿易往來有關；那麼，港英當局傳播這樣的傳聞又有何動機呢？這在外人就不得而知了。
如果這些傳聞源自港府的說法屬實，那麼港府又一直沒有采取實際的遞解行動，這則可能有以下三個原因：一、霍英東的行為只是違背聯合國的禁運決議，並沒有觸犯香港現行的法律；二、霍英東是土生土長的港人，在港生活時間遠遠超過10年了，而《驅逐不良分子出境條例》對居港滿10年以上者有較多寬容和豁免的指引；三、霍英東在往後的日子里“明哲保身”，能進能退，逐步緩和了與港英當局的關系。
雖然，“謠言止于智者”，霍英東被遞解出境的傳聞半年之後就消除了，但此事卻形成了一個強大的陰影，籠罩、困擾著霍英東的後半生；直到今天，霍英東的心里還沒有完全擺脫掉這個陰影。這件事，對霍英東的性格變化造成極大的影響，從而波及他的事業；某些時候，它在很大程度上左右了霍英東對一些商業活動的選擇和決策。所有這些，在以後的章節中還將談及，這里暫且不表。