Одновременно приходилось бороться с оставшимися в лесах бандами легионеров и националистов. Вооружённые антисоветские выступления не были столь кровавыми как в Литве, но всё же были ощутимыми. В 1944-52 годах бандитами совершено более 3000 преступлений, убито более 1500 человек. Для борьбы с ними были организованы истребительные батальоны комсомольцев и коммунистов, спецгруппы МГБ. Для окончательного решения проблемы бандитизма было решено ликвидировать его социальную базу. Бандиты имели обеспечение и укрытие среди местного населения, в частности среди своих родственников и близких, сочувствующих и бывших коллаборантов, закрепившихся на легальном положении. Саботаж, убийства партактива и прямое вредительство тормозили процесс коллективизации сельского хозяйства, запугивали население. В марте 1949 года была проведена операция по депортации ненадёжных элементов во всех «западных» республиках СССР. В Латвии высылке подлежали 13624 семьи (около 43 тысяч человек) или 2,3 % населения республики. Около 10 тысяч семей составляли кулаческую прослойку крестьянства, остальные были членами семей коллаборантов или легализовавшиеся пособники фашистов. 95 % высланных составляли латыши. После обращений высланных и их родственников в Совет Министров ЛССР, Верховный Совет ЛССР и ЦК КПЛ в течении полугода вернулись в Латвию более 50 семей. В период 1955-57 годов в Латвию вернулись почти все высланные. В современной латвийской печати часто указывается, что департация по составу была преимущественно женской (58 %). Это может указывать только на то, что мужская часть этих семей либо находилась в лесах, либо уже была осуждена за коллаборационизм.
После депортации сопротивление антисоветских элементов было полностью сломлено, отмечались лишь единичные случаи. В 1990-х в буржуазной Латвии прошли судебные процессы над исполнителями депортаций 1949 года. Несколько человек были приговорены к реальным срокам заключения, в том числе руководитель НКГБ ЛССР Альфонс Новик, который скончался в тюремной больнице в 1996 году.
1947 г. Колхозники колхоза «Селия» перед указателем расстояний до ближайших колхозов
Проводимая коллективизация принесла свои плоды. В 1950 году вне колхозов и совхозов оставалось 3,5 % крестьянских хозяйств, к 1960 году был достигнут довоенный уровень производстве сельхозпродукции. Большое значение приобрели рыболовецкие колхозы и рыбная промышленность.
В 1950-х годах начался бурный рост промышленности и укрупнение производственных предприятий: ВЭФ, РАФ, РЭЗ, Рижский вагоностроительный завод, «Радиотехника», фабрика «Большевичка» и другие. Металлообработка и машиностроение вышли на первое место по объёму производства и числу рабочих.
В 1950 году по оценочным данным в Латвии проживало 1943000 человек, из которых 880 тысяч составляли городское население и 1063000 – сельское. В 1959 году соотношение городского и сельского населения поменялось диаметрально, а численность населения перевалила за два миллиона человек, латыши составляли 62 % жителей.
Нехватка рабочих рук и рост промышленности к середине 1950-х пришли к неизбежному – встала необходимость набора кадров по всему СССР. Если в 1951-55 годах механический прирост населения составлял 16 тысяч человек, то в 1956-60-х – 58 тысяч. В этот же период проходила перестановка в центральных органах власти СССР и КПСС, слом прежнего идеологического направления, связанный с «десталинизацией» периода XX съезда КПСС. Практически все латвийские революционеры, репрессированные в 1930-е годы, были реабилитированы.
Новая политика в ЦК КПСС и проблемы демографического характера породили острую внутрипартийную борьбу в КПЛ с так называемыми «национал-коммунистами». Перед партийным руководством встали вопросы продвижения местных кадров, обучение латышскому языку приезжих, неконтролируемый рост нелатышского населения республики. В период Перестройки в середине 1980-х эти вопросы будут одним из таранов контрреволюции, а тогда, в 1959 году в результате вмешательства ЦК КПСС после июльского пленума ЦК КПЛ была сменена почти вся верхушка КПЛ, Верховного Совета и Совета министров ЛССР. Первая половина 1960-х обозначена годами зажима проявлений национальной культуры, до 1966 было запрещено несколько лет праздновать Лиго. Следующее противостояние тех же позиций произошло в 1971 году, когда было написано так называемое «Письмо 17 латышских коммунистов». Вернувшийся из ссылки Э.Берклавс, один из участников событий конца 1950-х, составил письмо с критикой компартии за политику ассимиляции. Письмо подписали известные в прошлом латышские революционеры, в том числе Э.Анкупе, Я.Густсон, О.Вавере, А.Зандманис. Письмо было направлено зарубежным компартиям и попало в западную печать. Это имело существенный резонанс в антисоветской пропаганде, а СССР назвал данное письмо фальшивкой.