いつも一緒に過ごしているので僕にはすごくなついているのですが…

理由としては、自分の好きな場所に連れていってくれると分かっているので、他の家族のときはイヤイヤしているのかもしれないですね。
もしそうなら、他の家族の方にもわんちゃんのお気に入りの場所を教えて連れていってみてはいかがでしょうか。
でも、ろっくくんはろっくさんが大好きなのは確かだと思います。

うちの犬は基本的に私が毎日一人で散歩してますが、たまに家族と複数人で散歩したり、他の家族が一人で散歩したり、それはそれで楽しそうです。
たぶん私一人だと近くをぐるっとですが、家族と複数人だとたいてい公園によってもらえる、家族が一人でだと遠くまでロング散歩してもらえると、犬にとって良いことが起こるからだと思います。
もしかしたらですが、「ご家族と散歩するとその日はあなたと散歩できないから嫌」とか思ってるのかもと思いました。

もしくは、うちの犬は駅まで家族を送って私と帰るっていう散歩をすると「家族をここへ置いていくの？」と何度も駅まで戻ろうとします。
どちらかと言えばおいていかれたのは私と犬だよ…と思いますが、犬は真剣です。
あなたをお家へ置いて楽しい散歩にいくなんて置いていかれるあなたが可哀想！と思ってるのかもと思いました。