听说胡阿麦年轻的时候是个不学无术的小混混，成天吃喝嫖赌胡作非为，连他的养父母也看不过眼，最后熬不过他的忤逆，只好将他逐出家门。
被逐出家门的胡阿麦依旧满不在乎地四处鬼混，直到欠下了一债，让仇家追得无处可躲，无意间躲进了正前往海上丝路的商队里，飘洋过海，偏偏又那么倒楣地遇上了船难，于是胡阿麦来到了传闻中的「海上仙山」。
这段经历胡阿麦本人极爱谈论，每每酒过三巡便忍不住要拿出来大作文章。
胡阿麦虽然只识得一个大字，但说起话来却是口沫横飞、滔滔不绝。「海上仙山」东海之国被他说成了人间仙境──美女如云、遍地黄金；那里的人不但能腾云驾雾，而且个个知书达礼、礼贤下士（嗯，胡先生，光这一点您就不合格了吧？）。