在清代的道光年间，龚自珍曾在此居住。后由潘仕成把这所宅院赠与广东的同乡会，因此这里便成为了番禺会馆。如今的番禺会馆四周均是高低不等的房屋，而房屋的周围又堆满了杂物，实在是找不到一丝会馆的痕迹。后来一位现住在这里的大妈告诉我们，以前这里的确很漂亮，有花园还有凉亭。后来经历过一次地震，自那次地震以后，这里基本上只剩下了房架子。后来由于居住的需要又重新翻盖成了住房，会馆早就没有了。
龚自珍故居位于上斜街50号。清道光年间龚自珍曾一度居此。
龚自珍的宅院前面是住宅，后面有花园。1831年他将这所宅院卖给广东番禺县人潘仕成，潘后赠与同乡会，遂成为番禺会馆。现为重点
文物保护单位。
龚自珍是我国近代进步思想家、著名
诗人、文学家。他博学多才，关心国家民族的前途和命运，全力支持林则徐禁烟，写过不少批判和揭露封建社会黑暗现实的政论文章。