李家聲的胞姊李嘉玲曾為麗的電視兒童節目《醒目仔時間》做主持，他中學畢業便加入節目扮演人形公仔毛毛及豆豆，之後更擢升為主持，後來報考無綫第十三期藝員訓練班，跟鄭伊健、謝天華、吳婉芳及潘芳芳同期畢業，入行三十多年演過無數角色，在《屯門色魔》飾演藍國偉，在《仁心解碼Ц》飾演變態色魔黎繼鵬，在《阿旺新傳》飾演賓佬，更憑《學警雄心》提名萬千星輝頒獎典禮最佳男配角。
在娛樂圈多年，李家聲一直星運平平，當年郭富城在台灣拍的電單車廣告，原先是找他演出，但因無綫不放人，後來才轉找郭富城拍攝，「可能事業運程不好，多年來已習慣，有時某個角色受歡迎，以為事業有點起色，結果沒有第二個角色去承接，又後勁不繼，我跟自己說，我是一個演員，不是明星，你不去調整心態，會很辛苦，很難繼續做下去，凡事淡然一點，才可以抵抗到起起落落，一路做下去，原來已成了有資歷的演員，有時監製找我們這類演員，也希望我們幫手帶新人，我都是敢言的人，跟新演員合作，都會給些意見，做戲是互動的，我覺得不出聲又不幫忙，好似好衰。」
李家聲去年意外傷腳，導致斷腳筋及大動脈破裂，要辭演劇集《大帥哥》，賦閒在家的他跟太太去檳城旅行散心，沒想到結果竟然移居當地，「我之前從未去過檳城，一去便愛上這個地方，民風純樸，簡直像七、八十年代的香港，雲吞麵乾撈是用豬油及黑豉油來撈，很有以前的味道，而且消費比香港便宜一大截，最終申請了馬來西亞第二家園計劃，去年十月已移居檳城，馬來西亞人喜歡看無綫劇集，很多人都說得一口流利廣東話，語言方面沒有隔閡，我拍劇多年雖然沒有大紅大紫，不過當地人見到我都覺得我熟口熟面，有種親切感，很易認識新朋友，來了九個多月，這裏的人都很熱心，初來埗到生活上遇到問題，他們都給了不少意見，我亦非常享受在這裏過簡樸的退休生活。」
香港地方細，不過人與人之間的距離就很遠，李家聲坦言在檳城的應酬比香港還多，「在香港忙於開工，開完工又累，很少見朋友；來了檳城之後，反而多見了香港的朋友，黑仔（姜皓文）也在檳城置了業，吳岱融亦有計劃過來，我都有跟他們飯敘，近期亦有一些圈外朋友來考察，我就帶他們去吃娘惹菜及一些地道大排檔，這邊出街食飯可以很便宜，炒過河粉約港幣十元，我跟太太在這邊，一個月也花不到一萬元，在香港臨走前租的車位已四千多元，間中出去食頓好一點的，又一、二千，加上租樓，每月開支要四萬，這邊唯一比較貴的是酒精飲品，因為回教國家，酒稅相對高，我在香港時喜歡收藏紅酒，儲了價值幾十萬的酒，帶過來又重稅，放在香港又要存倉費，我臨走前一個月全部喝光，當然有跟朋友分享，朋友都說我捨得一下子將幾十萬喝光，我說喝下自己肚，有什麼不捨得呢！」