據老一輩的人回憶，1962年許多大陸偷渡客紛紛前往香港淘金，很多人未到就已死在火車裏，很多遺體就放在這個公眾停屍間。
除了曾是停屍間外，還有供人出殯行殮的永別亭，停屍間及永別亭的位置約在理工大學網球場處。從工專升格為大學之後之後，市政當局才將公眾停屍間及永別亭移往它處，永別亭民營之後，現在名為永恆殯儀館。
據傳，香港理工大學還有六大不可思議事件。
1、不關燈的圖書館
有一個女學生因為要考試的關係，天天在圖書館三樓温習功課。有一天女學生累到睡着，而管理員也沒看到她，就關燈然後關上圖書館大門。
女學生醒來之後，見燈都熄了，變驚慌失措地亂跑，最後被倒下的書架給壓死。之後每到夜晚當圖書館熄了燈後，三樓就會傳出女學生的哭泣聲，因此，圖書館三樓就不熄燈。
2、天花板上的工人
理工大學內有一條樓梯通往大學本部，樓底上方，有一玻璃纖維天花板，據傳，當年興建的時候，發生了一起工業意外。
報紙的標題是，“理工門外裝修工人高空墮下喪生”原來該工人在天花板作業時，沒有做好安全措施，從天花板高處掉下，當場死亡。
由於死者的妻子當時人在大陸，其他家人似乎沒有招魂或是好好祭拜，導致在事情發生後的一星期內，已有多名學生仰望天花板時，見到一名男子坐在上面的鐵柱上，狀似可憐。校方為了安撫學生，便説同學看到的只是倒影罷了。
3、草坪上的血痕
理工大學有一個人工草坪，當年建造這片草坪時，有一名工人不小心掉進空地暈倒。其他工人沒發現，就在空地鋪上水泥漿石把暈倒的工人給活埋。
人工草坪弄好之後，有不少學生投訴草坪經常流出不明的紅色液體，還有學生在晚上見一男子滿身水泥漿石然後消失。校方於是派人剷起草地﹐終於發現了這名被活埋的工人的屍體。
4、電梯裏的戀人
許多年前，理工大學有兩名同系的學生情侶，他們想在畢業前私定終身。過沒多久，女方便懷了男方的孩子。當年風氣保守，這對情侶一時想不開，便一起在大學地下保安中心旁的樹上自殺。
事件發生後，有很多學生使用該大樓的電梯時，聲稱電梯門打開後，會看見那對自殺的情侶對他們微笑。雖然學生堅持自己沒看錯，但校方一直聲稱並無此事。
5、噴水池的隱形四不像
理工大學正門前有一個噴水池，傳聞這噴水池是一隻隱形的四不像，只要有學生碰過池水便會遭遇不幸。
曾經有一名外藉學生不相信這傳説，他走到噴水池用手撥弄池水，結果數天後死於車禍。還有傳聞説，如果撥弄池水學生就會無法畢業。
6、泳池裏的半身小孩
一名外籍教授帶着五歲多的兒子去學校泳池游泳，泳池位置就在理工大學學生餐廳旁。教授更衣後就不見兒子的蹤影，起初他以為小孩子自己跑去游泳，而泳池也有救生員，所以不以為意。
但時間一分一秒過去，兒子卻猶如人間蒸發，始終沒有出現。焦急的教授四處尋找，有一位救生員表示早前還見到一個洋人小孩，但一眨眼便不見了。就在此時，有泳客發現有人溺水，而溺水就是教授的兒子。
當救生員救回小孩時他已經溺斃。當時，舊學生餐廳有一列落地玻璃剛好面對泳池，學生們吃飯時，常常會見到一個外籍小孩貼近玻璃，一開始有學生會去逗他笑，可是小孩總是隻現出一張蒼白的面孔，然後下半身開始消失，直到整個身體不見為止。
鬧鬼傳聞出現後，為了停止恐慌，餐廳負責人便用反光膠紙貼在玻璃上，大概是一個小孩的高度，以免學生再看到這個溺斃的小孩。
