楊梅西北角的富岡地區，因有客家移民農墾聚落主要信仰的大伯公，
時常傳出顯靈保佑地方，所以地方人便將稱之為伯公岡。
伯公岡聚落的名稱由來即是因為客家的傳統伯公祭祀信仰而來，
此地聚落為台地的岡地形型態，自清乾隆開始有客家移民墾拓記載開始，
一直到現在仍是地方居民習慣的地名稱呼方式。
最早的地名由來是源自位在現今富岡車站後站附近的伯公廟，
此廟正好位在整個台地的岡上，所以地名以此習慣稱呼。
此古老的伯公廟，目前並不知道始建的年代，
但依據歷史記載此地方的客家移民墾拓已經在清乾隆年間就有紀錄。
所以，推斷應該在當時就有伯公的信仰存在，
但廟宇建築的設置最早為何形式，目前當地居民並無人知曉，
只知道此伯公廟年代相當地久遠。
原本建築約為一人高的小廟，但其客家的傳統風水信仰的格局，
相當明確表達，在廟後方有完整的化胎做為靠背。
雖然政府行政里的劃分已經與一般民間稱呼不同，
對照現今的行政里名，可以知道伯公岡地區涵蓋富岡、豐野、
員本、三湖，上湖等行政里所在。
伯公岡原是農村聚落，在日治時期昭和 2 年〈1927 年〉鐵路
改道到此設站後，才出現小街區，由於地處偏遠又經濟產業落後的關係，
地方人士建議改名為富岡，意是希望能發展為新興富裕的地區。
清代時期劉銘傳的鐵道路線原是直接穿越從舊楊梅車站，
經過崩坡到大湖口站〈即位在現今湖口老街位置〉。
鐵道坡度對於火車通行而言，是相當不利的狀況，
日治初期雖然延用相同路線，但在昭和 2 年將鐵道依地形順應而改道，
順勢通過地塹內向新竹方向延伸，始得火車能夠增加行車效益。
此也是伯公岡站設置的成因。
然而伯公岡市街聚落的中心點仍舊以大井頭為聚落的生活中心。
並不因車站的設置而有所改變。
其後，雖然大井頭位置因應地方居民信仰祭拜上的方便而建伯公廟，
並將井口封閉，當地居民仍是以大井頭伯公廟為聚落生活的重心位置。
伯公岡市街聚落的中心一直以大井頭為聚落的中心，
起因為此處有一口聚落居民共同取水使用的大井在此，
居民每日的生活重心點。
所以，從伯公岡通往楊梅市街與新湖口、新屋市街、新屋大坡、
永安漁港等周邊要聚落地區的交通中心點，就位在此。
從街道的紋理發展可以很清楚見到。
伯公岡重要的商業經營商店也集中在大井頭附近街上，
有米店、壟間、雜貨店、布店、生活食品商店、肉販、菜販等，
均會聚集在大井頭附近。
日治時期昭和二年(1927) 後鐵道改線設置伯公岡站之後，
新興出站前的廣場與今天的中正路通往大井頭，商業發展也往中正路
逐漸分佈，且往車站位置沿路開商店發展，
此時即出現著名的呂氏家族在此建屋，
成為現今伯公岡保留最為壯觀華麗的街屋，
以及著名的呂家聲先生的發展傳奇。
呂家聲曾經擔任過日治時期的楊梅庄庄長，
約略是今天的楊梅鎮長，在日治時期，臺灣籍人士能夠擔任庄長的
公職是非常不易的事情，
根據後代家屬的訪談得知 ，呂家聲是位非常有眼光的土地投資商人，
到新竹桃園各地考察，購買地產當作投資，此在日治時期的臺灣人士而言，
是很少有臺灣人從事的投資行業。
根據《桃園縣志》人物志記載：
呂家聲，世居廣東風順，其先祖呂建玉于清乾隆年間渡台，
出居新竹山崎，後遷新屋埔頂，致力稼穡，家道小康。
家聲誕于今居，自幼勤讀好問，凜資亦至溫後。
比長，修以接物，一以仁善為歸。以是漸致聲遠，遂被任為楊梅區長。
就事後，努力擴張市區，修築溝渠，而其他有關公眾幸福地方興旺之事業，
亦靡不剋盡厥職以圖之。
哲嗣廷結甫卒業于日本大學，即在龍潭造林，亦有鄉賢之譽。
因為日治時期縱貫鐵路的通過設站而興起的小鎮，
成為鄰近新屋聚落仰賴進出的交通要衝，
地方的客家族群由常年的大坡農業地區，移轉到這個以客家人
最傳統信仰「伯公」廟為中心的新興市集，
早期出現民生重要的布店、米店、漁貨及豆餅等批發商、貨運行等，
市街熱絡繁華一時。
車站前市街的興起，呂氏家族興建華麗的仿西式日本街屋，
留存到現今仍然不減風光的建築裝飾色彩。
現今雖然已無門庭若市，但由華麗的街屋建築，
展現其當年富甲一方，轉型經商的成功案例……
