我家的地方原本是个小山坡 现在建两面挡土墙大约三到五米高 然后里面填土 房子就建在这上面?

否则不但上面不能建房，就是建一层楼今后房子也不能保证不开裂填土如果夯实不好，甚至连填土都挡不住！5米左右挡墙的基础要埋到老土一定深度，总之像你说的这种状况，挡墙还要有一定厚度，非专业人士不建议随便建，上面建房风险很大，否则会白花钱

楼层不高就没事