当然是违法的。这种行为属于违法占用耕地的行为。事实上，责任田并不属于你家所有，你家只是可以耕种而已，任何建筑，必须事先经过审批，否则就是违法的。
违法占用耕地建厨房的，国土资源局应当对违法占地立案查处，作出了行政处罚：
1、下达《违法建筑通知单》。
通知单可以是国土资源局局、公安局、规划局等多个部门联合下发，责令违法建筑在法定期限内自行拆除，否则强制拆除。
2、依据法定的处罚标准，处以罚款：
可以按照非法占用土地每平方米罚款30元的标准进行处罚。
法律规定，如果非法占用基本农田5亩以上，或者非法占用其他耕地10亩以上，就要追究刑事责任，处五年以下有期徒刑或者拘役，并据处或者单处罚金。
