С белыми офицеру, родом из крестьянской семьи, оказалось не по пути. Говоров покинул армию Колчака и вместе с группой солдат перешел на сторону красных. Вместе с ним бежал и его брат Николай, тоже офицер. Там он оказался в составе армии Блюхера, воевал против того же Врангеля, был дважды ранен: в районе Каховки осколком в ногу, а в бою под Антоновской получил пулевое ранение в руку. Воевал храбро и был награжден за это самим председателем Реввоенсовета Троцким «красными революционными шароварами». Именно этот атрибут воинской экипировки, который был тогда формой награды за особые успехи в боевой подготовке, стали потом причиной его успеха у будущей жены. Как вспоминал сын Говорова, его будущие мать и отец познакомились в 1923 году в Одесском оперном театре. «Помимо открытого волевого лица и высокой статной фигуры молодого красного командира, очень сильное впечатление на нее произвели так называемые красные революционные шаровары, в которых щеголял отец», – вспоминал Сергей Говоров.

В Красной Армии Говоров служил образцово и быстро поднимался по лестнице военной карьеры. К началу войны с Германией он был уже на посту начальника Артиллерийской академии им. Дзержинского. Кстати, незадолго до этого он самостоятельно изучил немецкий язык и даже сдал экзамен на военного переводчика. Был уверен, что именно с Германией его стране вскоре снова предстоит воевать.