非法携带枪支的，会受到下列行政处罚：
处五日以下拘留，还可以并处五百元以下罚款；
情节较轻的，则处警告或者二百元以下罚款；
如果行为人非法携带枪支进入公共场所或者公共交通工具的，则处五至十日拘留，还可以并处五百元以下罚款。

《刑法》第一百二十八条
违反枪支管理规定，非法持有、私藏枪支、弹药的，处三年以下有期徒刑、拘役或者管制；
情节严重的，处三年以上七年以下有期徒刑《最高人民法院关于审理非法制造、买卖、运输枪支、弹药、爆炸物等刑事案件具体应用法律若干问题的解释》第五条
具有下列情形之一的，依照刑法第一百二十八条第一款的规定，以非法持有、私藏枪支、弹药罪定罪处罚：
（一）非法持有、私藏军用枪支一支的；
（二）非法持有、私藏以火药为动力发射枪弹的非军用枪支一支或者以压缩气体等为动力的其他非军用枪支二支以上的；
（三）非法持有、私藏军用子弹二十发以上，气枪铅弹一千发以上或者其他非军用子弹二百发以上的；
（四）非法持有、私藏手榴弹一枚以上的；
（五）非法持有、私藏的弹药造成人员伤亡、财产损失的。