Non, une ancienne fosse septique n'est pas un problème ; les matières fécales ne constituent pas une pollution, c'est plutôt un engrais.
Je parlerais avec les voisins, il n'est pas très probable que votre terrain vague soit différent des terrains adjacents. Cela me suffirait.
Si les voisins ont construit avec un cuvelage étanche, tu en auras aussi besoin, et si les voisins ont dû pieuter ou remplir avec une couche particulièrement épaisse de gravier, tu devras également en tenir compte.