方世玉，乾隆年间人，祖籍广东肇庆，父亲方德是丝绸商人，其为方德与第二个妻子苗翠花所生。其上有两个哥哥分别为方孝玉、方美玉，为方德与第一个早逝的妻子李氏所生。

据史料记载，方世玉性情刚烈，自幼就横行乡里，喜欢与其他孩子们打斗。十几岁时，方世玉被父亲方德送到少林派学艺，虽然身形矮胖，但仗着一身不怕打的功夫，每次斗殴时都冲锋在前，两位兄长在打斗中都难免受伤，却只有方世玉安然无恙。在少林十虎排名中，洪熙官排名第一，其中方世玉名列第二位，不单是因为武功高强，而且本性好勇斗狠。

洪熙官，籍贯广东花县，他是少林弟子，也是洪拳的创始者。