ピート・ベストが突然脱退した時、そのニュースはすぐに広まった。ボブ・ウーラーとエプスタインとの間に、激しい言い合いがあったことも知られている。
ピート・ベストを辞めさせる際には、一般的に知られている以上の何かがあったらしいのだ。ボブ・ウーラーは「真実を書く」とエプスタインに告げたと言う。それが、多くのファンのためにとるべきことなのだと。
彼とエプスタインは口論し、エプスタインは逃げ出すように去っている。だが、その場にいたテッド・ニップス（歌手ビリー・クレーマーのマネジャー）が、とりなしてくれた。
ニップスは、ピート・ベスト、エプスタイン、そしてビートルズに起きたことは、第三者が口出しすべきではないとウーラーに語り、エプスタインが去った後、彼を説得しているのである。

ウーラーがどのようなことを書こうとしたのか不明だが、
エプスタインとしては、必死にベストの“首切り”を行った。
それは、端から見れば何とも非情な行いに見えたとしても仕方がなかったのかも知れない。
彼は、レコード店経営者から、ロックグループのマネジャーに転身したおそらく初めての人間である。その世界での当然の常識に無知であったということも多かった。
そして、同時にそれが、考えられないほどの成功をビートルズにもたらすことになったかも知れないのだ。当時のエプスタインとしては、１つひとつの問題を懸命にクリアーして行くしかなかったということなのだろう。

リンゴ・スターは、ビートルズにとって申し分のないドラマーであった。ジョージ・マーティンは、リンゴが有能なドラマーであることに満足した。ジョンとポールのじゃまにならず、しかもユーモラスである彼のセンスは、グループにピッタリだと感じ、彼を選択したビートルズの感覚に、改めて感心するのであった。
だが、問題は別にあった。 ピート・ベストをクビにした男、エプスタインは、ファンたちの怨嗟の的となったのである。彼は、キャバーン・クラブに近づくことすらできなくなる。
ボディーガードに守られなければならないほど危険な状態になった。

「ピート・イズ・ベスト」

「ピートよ永遠に、リンゴなんか要らない」（ピート・フォエバー、リンゴ・ネバー）

そう記されたプラカードを持ったファンたちが、ＮＥＭＳの前をねり歩いたのである。
しかし、ピート・ベストを“傷つけた”エプスタインは、もしかしたらそれ以上に“傷ついていた”かも知れなかった。
彼は、自分が彼にとった態度に自責の念を持ち、罪悪感に悩まされ、心身ともに疲労していた。

ビートルズがレコーディング契約を済ませた1962年の夏の終り。まだ、リバプールでのライブが行われていた。後に行われる演奏会場と比べれば、はるかに小さな規模でのライブが行われていたのである。
エプスタインは、ファンたちに捕まると小突きまわされたりしている。この頃は、エプスタインにとっても次々と起こる問題に立ち向かう困難な時期であった。コンサート会場でのケンカは、ビートルズにとっては何ということもなかったが、エプスタインを驚かせ、たじろがせた。