違反住宅でも建築後その違反要件を改めればもう訴えられませんか

隣接の袋地に共同住宅が建てられたが、公道までの通路は２ｍ幅しかなく、当然ながら所有権はなくて通行目的の地役権しかありません。そのほかにも違反事項があって、私や市役所からの建築停止の申し入れにも拘らず、建築が強行されました。

数年後、共同住宅の外階段などのごく一部を撤去して、一戸建てとして登記されて売りに出されました。買い主は、それまで地役権だった公道までの通路部分も買い取り、現状だけを見ればもう文句のつけようのないように思われます。

しかし、私は隣接の袋地に簡単には家が建てられないと市役所などに再三確認して転居してきただけに、日照や眺望が失われ大迷惑です。違反建築が一部の改装で一戸建てに名目変更して違反でなくなっても、我が家への迷惑は以前となんら変わりません。こんなことが許されるなら、もっと悪用されるでしょう。
こんな状況を打開するような訴えなどが可能でしょうか、教えてください。

なお、訴えるなら最初の違反建築時だったことは承知していますが、当時は市役所が建築阻止をしてくれると過信してしまい、判例にもあるように結局は市役所に騙された思いです。