発達障害の方のカウンセリングやコミュニケーショントレーニングも行っております、
安希カウンセリング事務所の鈴木と申します。

弟さんのことで、苦心され、またご自身の生活も乱されて、
お辛いことと思います。

アスペルガー症候群は、アスペルガーの専門医がいる大学病院や総合病院で
診断してもらわなければ、判断が難しい病気です。
（厳密には、生まれながらの脳の障害です）
精神科医でさえ、統合失調症や躁鬱病、強迫神経症などとの区別が難しいからです。

ただ人によって、症状も様々なので一概には言えませんが、「しつこく罵倒する」
「そんなの無駄だ」「どうせ無理だ」という言葉からすると、
少しアスペルガーとは違うかな？と言う感じもします。

アスペルガーの方なら、家族ともコミュニケーションをとれず、
外部との接触を断ち、自分の世界に、頑に閉じこもる方が多いです。
罵倒し続けられる＝コミュニケーションをとり続けられるとみることもできるからです。

しかしながら、こだわりの強さや、相手の都合が理解できないほどの視野の狭さは、
何らかの精神的な疾患の可能性が強いと思います。

できれば、ご本人に精神科やメンタルクリニックを受診して頂くのが一番です。
しかし、現在の状況で、受診を進めても「病人扱いをした」と、
逆に、火に油を注ぐ結果にもなりかねません。

ご提案としては、各都道府県にある精神保健福祉センターにある
無料相談窓口では、ご家族からの相談も受けつけていますの、
そちらに相談されたらいかがでしょう。

東京都ですと、思春期・青年期（おおむね15〜30歳未満）相談を行っています。
ご本人やご家族の相談を、心の専門家が丁寧に聴いてくれ、
治療が必要かどうかの判断や、医療機関の選び方、
ご本人への受診の進め方などに関して、アドバイスをくれたり、
家族の支援をしてくれます。サイトは、こちらです。
http://www.fukushihoken.metro.tokyo.jp/sitaya/seishin/shishunki/index.html

大切なのは、ご家族だけで、問題を抱え込めば、
家族みんなが共倒れになってしまいます。
餅は餅屋です。専門家の力を借りましょう。

すぐに解決にならないかもしれませんが、
ご家族皆さんのためにも、焦らず、じっくりと、
専門家とともに取り組めば、必ず弟さんも回復できます。
1日でも早くその日が来ますことをお祈り申し上げます。