「あの子部活辞めたんだなー」程度で浮きはしないと思います。
推薦は学力➕αが必要だと担任に言われました。まあ学力があれば部活動をやっていなくても推薦を貰えると思いますが、学力がある➕部活動を3年間やっていた子と比べれば劣ってしいますね。もし心配なのであれば、探究部や放送部などの緩い部活動に転部したり、委員会役員、
生徒会役員になって学校を盛り上げたりしてみてはどうでしょうか?また、2年
英語科の担任がイベントや募金のボランティアやってくれる人をたまに募集しているのでそういった活動に参加してみるのもいいと思います。また、市で募集している校外でのボランティア活動の参加もいいかもしれません。3年時の担任に調査書に書いてください!とお願いすれば書いてくれると思います。(調査書についてはよく知らないので担任に聞いてみてください)
推薦には指定校推薦、公募推薦、総合型推薦(AO入試)と呼ばれるものがあります。それぞれ内容が違うので調べてみてください。また、大学によって受験資格や受験方法が違ったりするのでよく調べてください。
推薦で行ける人は限られていますから一般も視野に入れて勉強に専念するために部活を辞めてもいいと思います。私はその理由で部活を辞めてボランティア活動や英検などの資格取得に力を入れています。
先生からの印象は悪くならないと思いますが、郡高の先生は部活動に入らないとうるさい先生がいるので辞める時はうるさいと思いますが、自分の悔いが残らないように頑張ってください。