根据相关资料查询显示：不算。1、残疾人用鞋打人，正常人反击属于正当防卫，不算违法。2、身体残疾打人，如果造成正常人轻伤，是因为残疾人的动作所导致的，残疾人需要承担法律责任。但是精神残疾在打人时是犯病的，那就不需要承担刑事责任。