まずは、保護の方向で行くのか、それとも猫たちに住処を移動してもらう方向で行くのかを決めてからのことだとおもいます。

・保護する方向であるなら、当然全頭の避妊・去勢手術の必要があるでしょう。
また、迷惑であるとされる一番の原因が排泄であろうと思いますので、トイレを猫が集まるような場所に設置し
「迷惑にならないように工夫しています」とご近所のかたに分かるようにアピールをしてみます。
また、猫が増えて行かないように、食事は決まった時間に与え、残したものは必ず引き上げ食べ残しは掃除していきます。
他の猫のお世話をしている方にも、このことは徹底していただく必要があるでしょう。

・猫に移動してもらう方向であれば、徹底して餌などを与えなければ、その内に移動していくでしょう。
また、居心地を悪くするのもいいかもしれません。
一番簡単なのは、犬を飼うことですが、子犬がいきなり猫に鳴くようにはなりませんので、緊急処置にはなりませんね。
もしかしたら、防犯用に販売されている、センサーつきの犬の置物がいいかもしれません。これは、センサーが反応すると「ワンワン」と犬の声がするものです。
でも、猫が慣れてしまうと意味がなくなるでしょうね。

いずれにしても、それ相応の覚悟を決めて動かなければならないでしょうね。