限制人身自由的行政处罚只能由法律设立。行政处罚法还明确规定了限制人身自由的行政处罚，只能由法律设定，这是法律的专有权力，行政法规或者地方性法规都无权规定限制人身自由的行政处罚。

《行政处罚法》第十六条，国务院或者经国务院授权的省、自治区、直辖市人民政府可以决定一个行政机关行使有关行政机关的行政处罚权，但限制人身自由的行政处罚权只能由公安机关行使。