法律分析：
铁路用地出租给你建房地方可以拆的。
法律依据：
《中华人民共和国铁路法》
第三十三条 铁路发展规划应当依据国民经济和社会发展以及国防建设的需要制定，并与其他方式的交通运输发展规划相协调。
第三十四条 地方铁路、专用铁路、铁路专用线的建设计划必须符合全国铁路发展规划，并征得铁路主管部门或者铁路主管部门授权的机构的同意。