●質問

ドメインを購入し、サイトを作成運営しているものです。
そのドメインの履歴を調べずに使ってしまった自分が悪いのですが、
そのドメインは中古ドメインで、今運営しているサイトとは全く違った内容
（デコトラとかその辺のサイト）で運営されてました。
その為に関係の無いサイトからの被リンクが多くついており、
そのリンクを辿って訪問してくれた人はすぐに離脱してしまう為に離脱率＆直帰率が
非常に高くなってしまっています。
このような離脱率の高さがSEOに間接的な悪影響を与えてしまっているのではないかと
懸念しています。
実際に離脱率の高さは悪影響を与えてしまうのでしょうか？
もし悪影響を与えているとするのであれば、改善する方法はあるのでしょうか？