本人はそれがストーカー行為と思っていないかもしれません

幼馴染みで家や通院先まで知られていると怖いですね。
それで、きっぱりと言えないんですよね。

その彼は、「大人のADHD」だと思います。
ストーカー行為にまで発展してしまうのは、相手の事（心や立場）を思い遣れないから。

彼はきっと今まで生き難さを抱えて生きていらっしゃった事でしょう。
ADHDは、脳の機能障害です。

だからと言って、相談者さんが被害を受けっぱなしでいいとは思いません。
もしもの時に備えて、警察に相談実績を作られる事をお薦めします。

はっきりと拒絶して、逆恨みされ、変な行動に出られたら困ります。
会って話し合うのは難しいし危険ですから、手紙を書かれたらいかがでしょうか。

できればその彼は大人のADHDを診断できる医療機関に行かれるといいのですが、ご本人が無自覚なので本当に困りますね。

私は 婚活サイトで知り合い
しょっちゅうメールや電話がかかってきて こんなに愛されてるんだと最初思ってましたが、
女友達とファミレス行くと前もって連絡してても9回も着信がありました。こんなことが続き、早朝や夜遅くにも電話。
別れを告げたら、
やり直してと言われたが、別れたい理由を一つ一つ説明したら逆ギレ。ストーカーみたいになりました。
理由や不満は詳しく言う必要ありません。ただ、考え方が合わないくらいの理由で、一切連絡をとらない。
携帯変えるくらいの覚悟してください。
いまは熟年のストーカー怖いですよ

回答とならないでしょうが、書かせていただきます
どちらかの愛着が勝っていたり、執着心が強いと
起こりえる問題だとおもいます
ご本人は、いまは客観的な考え方ができなくなって
いるようです

わたしは、ひとには相談できぬ交際相手がいましたが、
いま別離を決めて、耐性をつけてます

お互い、おもいやりが根底にあれば、いいですね

こんにちは、イエス、ノーははっきりと申します。思いやりが相手には何も通じないのです。私も同じようだけれど、今ははっきりと申します。中途半端な状態は相手には迷惑を掛けることがあります。

毅然とした態度をとるべきです。
うじうじしている場合ではないと思います。
嫌なら嫌!!相手をキッパリ拒否するくらいできるでしょう!?

被害者は相手の方です。

あなたが、
「私は良い人だから相手を傷つけたくないので、断れな〜い」
って、言動が原因です。
本当に相手の事を考えている人であれば、
はっきり断るのが礼儀だと、私は思います。

まずは警察に相談にいくべきです。

彼に悟られないようにね。
そこから始めた方がいいです。

早急に彼自身に然るべき措置を取るなど鮮明な態度を示すなり、警察にストーカー行為で困っているなどの毅然とした対応を取らないと・・・・・

マスコミで騒がれるような家族を巻き込んだ刃傷沙汰になり、最悪あなたなり家族の誰かに不幸な結果が訪れますよ！

こんなところでのんびり半ばお惚気めいた文章で相談している場合じゃないと思いますけどね。

ひょっとして彼とは男女の関係があるのかな？

そうであるならなおさら早急に適切かつ毅然とした対応をすべきですね。

ところであなた、おいくつ？

メールや電話に出ないようにして、態度で縁を切るか、
「自分にはその気はない」ことをはっきり言葉で言って分かってもらうか、どちらかでしょうね。

今の状態は、あなたが
「いやな人になりたくない」と思って、相手にいい顔をしていることがすべて原因です。

困っていますと、被害者面をするのはやめましょう。