Після погроз судового позову з боку міста Клівленда та вболівальників на початку 1996 року було досягнуто компромісу, який дозволив Моделлу заснувати Балтімор Рейвенс як нова франшиза, зберігаючи контракти з усім персоналом Browns.
Брауни були спочатку члени AAFC і вигравав титул ліги в кожному з чотирьох років існування AAFC. Найвідомішою з цих команд-переможців була команда 1948 року, яка здобула рахунок 15–0 і стала першою непереможеною командою в історії організованого професійного футболу.
Місто Клівленд фактично подав до суду на НФЛ, коли тодішній власник Арт Моделл спробував перенести франшизу до Балтімора після сезону 1995 року. НФЛ вирішила це, змусивши Моделла повернути франшизу Браунів, а потім дала йому нову, щоб перемістити організацію та створити Балтімор Рейвенс.
"Брауни" стали "Воронами" в 1996 році. Ліга не могла з цим впоратися, тож вони прикинулися, що «Ворони» — це нова франшиза, а «Брауни» продовжуватимуть якомога швидше з усіма новими гравцями, але зі своєю історією. Однак "Ворони" взяли гравців "Клівленда" з собою в Балтімор.
У лютому 1996 року НФЛ погодилася залишити назву та кольори команди в Клівленді. Місту було обіцяно нову франшизу до 1999 року, до закінчення будівництва нового стадіону. Суперечка щодо переселення мала національний підтекст.
Балтімор Клівленд Браунс Суперечка щодо переїзду, яку вболівальники просто називають «Переїзд», виникла після оголошення власника «Клівленд Браунс» Арта Моделла про те, що його команда Національної футбольної ліги (НФЛ) переїде зі свого давнього будинку, Клівленда, до Балтімора на сезон НФЛ 1996 року.
1999 Брауни не зіграли в жодній НФЛ із 1996-98 роками після того, як початкова команда та персонал переїхали до Балтімора у 1996 році. Франшиза Браунс відновила діяльність у 1999 з однаковим логотипом і кольорами.