限制人生自由的行政处罚只能由法律设定，而法律只能由全国人大及其常委会制定。

法律规定，全国人民代表大会及其常务委员会是国家最高权力机关和立法机关，可以设定任何种类行政处罚。限制人身自由的行政处罚，只能由法律设定。

行政处罚的设定权

1．全国人民代表大会及其常务委员会是国家最高权力机关和立法机关，可以设定任何种类行政处罚。限制人身自由的行政处罚，只能由法律设定。

2．国务院是最高行政机关，可以依法设定除限制人身自由以外的行政处罚。法律对违法行为已经作出行政处罚规定的，行政法规不得超越法律规定的给予行政处罚的行为、种类和幅度的范围另行作出行政处罚规定。

3．地方性法规可以设定除限制人身自由、吊销企业营业执照以外的行政处罚。法律、行政法规对违法行为已经作出行政处罚规定的，地方性法规不得超越法律、行政法规规定的给予行政处罚的行为、种类和幅度的范围另行作出行政处罚规定。

4．国务院各部、委制定的规章可以在法律、行政法规规定的给予行政处罚的行为、种类和幅度的范围内作出具体规定；尚未制定法律、行政法规的，部委规章可以设定警告或者一定数量罚款的行政处罚。罚款的限额由国务院规定。国务院可以授权具有行政处罚权的直属机构按照本条的情形规定行政处罚。

5．省、自治区、直辖市人民政府和省、自治区人民政府所在地的市人民政府、经国务院批准的较大的市以及经济特区市人民政府制定的规章可以在法律、法规规定的给予行政处罚的行为、种类和幅度的范围内作出具体规定；尚未制定法律、法规的，上述人民政府制定的规章可以设定警告或者一定数量罚款的行政处罚。罚款的限额由省级人大常委会规定。

6．除上述规定外，其他规范性文件不得设定行政处罚。

税务行政处罚听证的具体情况，是需要严格基于实际的行政事项而定的，特别是不同的违法结果所适用的行政处罚类型也是不同的，税务机关应当依据法规来作出处罚决定，当事人是可以按照听证的程序来进行申请处理的。

《行政处罚法》第十条，法律可以设定各种行政处罚。限制人身自由的行政处罚，只能由法律设定。