Тем не менее с 1954 года Разинский стал основным вратарём ЦДСА. Гибкий и артистичный, но надёжный, он полюбился армейским болельщикам и вошёл в число лучших голкиперов СССР. Однако первый номер железно оставался за Львом Яшиным. Хотя в Советском Союзе никогда не было дефицита сильных вратарей.
– С Яшиным не было у нас враждебной конкуренции-ажиотажа. Мы были друзья. У него «Динамо», у меня ЦСКА. В сборной мы играли вместе, и все играли хорошо. Но в основном играл Яшин. Володя Маслаченко, ещё один известный вратарь, писал, что у нас героев назначали. Сколько талантливых парней за спиной сидели? Володя Беляев, Анзор Кавазашвили… – вспоминал Борис Давидович.
В армейском клубе Борис Разинский играл вместе с другими звёздами советского футбола 50-х
К Олимпиаде-56 у 23-летнего Разинского были две бронзы чемпионата СССР и победа в Кубке страны 1955 года. Дважды он попадал в число 33 лучших футболистов чемпионата – оба раза под номером два, после Яшина. Сыграл два матча за сборную – с французами в 55-м (2:2) и с датчанами в 56-м (5:1). Так что выбор старшего тренера сборной Гавриила Качалина, включившего в олимпийский состав именно Разинского, был полностью оправдан.
Но на предолимпийских сборах Борис едва не лишился места в сборной. Поругался на базе в Тарасовке с врачом Олегом Белаковским, который запретил игрокам есть грибы, собранные ими в лесу и уже пожаренные поваром.
– Со временем-то я осознал, что он был прав, – говорил Разинский. – Не дай Бог отравились бы – как на следующий день в Мельбурн лететь? Да и команда отреагировала спокойно. Молчат Симонян, Нетто, Яшин. А меня дёрнул же чёрт за язык. Вступил в полемику с доктором, слово за слово. Крикнул в сердцах: «Не поеду ни на какую Олимпиаду!» Схватил сумку и двинул на электричку. Кто-то из администраторов побежал вдогонку. Но это не потому, что я такой ценный игрок. Вылет был утром, и оформить вместо меня уже никого не могли. Хотя, пока до платформы дошёл, остыл. Понял, что ерунду сморозил.
Футбольный турнир в Мельбурне получился курьёзным. Матчи первой стадии – 1/8 финала – вообще не состоялись: в результате Индия, Индонезия и Болгария, которые должны были сыграть соответственно с Венгрией, Южным Вьетнамом и Египтом, прошли в следующий раунд без борьбы. А поединок Китай – Турция остался не сыгранным из-за того, что в Австралию не приехали оба соперника. Стремясь сделать полноценным хотя бы четвертьфинал, игру сборных США и Югославии перенесли в эту стадию. В результате открывать программу футбольного турнира в жаркий, но ветреный день 24 ноября выпало сборным СССР и Объединённой германской команды.