Небольшое село, расположенное в живописнейшем уголке Рязанской земли, неподалеку от есенинского Константинова, на протяжении столетий находилось под покровительством Царицы Небесной, прославленной в Ее чудотворном образе. Казанская церковь села Козловка (Козлово) известна с 1753 года. Как сообщает «Историко-статистическое описание церквей и монастырей Рязанской епархии, ныне существующих и упраздненных», в конце XVIII века, в 1795 году, помещиком Александром Матвеевичем Нестеровым в память по убитому поляками сыне Николае был заложен каменный Казанский храм, освященный в 1801 году. В 1807 году, с разрешения епархиальной власти, супругой храмоздателя, Александрой Афанасьевой Нестеровой, пристроена трапеза с приделом в честь святого Димитрия. Церковь имела форму креста с закругленными концами, трапеза - вид четырехугольника. С южной стороны храма вне церковной ограды стояла на дубовых столбах, покрытая тесом колокольня, построенная в 1879 году».
К сожалению, о судьбе храма после революции 1917 года сведений не сохранилось. Однако народная память оказалась сильнее насаждаемой десятилетиями советской пропаганды: храм исчез с лица земли, а жители продолжали отмечать свой престольный праздник. И вот теперь по милости Божией все вернулось на круги своя: в селе вновь появился Казанский храм - деревянный, с золотыми луковками куполов, приоткрывающий перед жителями XXI века страницы истории древнерусского храмового строительства.
Чин малого освящения нового храма по благословению Святейшего Патриарха Московского и всея Руси Кирилла совершил наместник Николо-Угрешского монастыря игумен Варфоломей. На освящение пришли многочисленные сельчане - будущие прихожане Казанской церкви, прибыли паломники из Угрешской обители. Также в праздничный день храм посетили заместитель главы администрации Рыбновского района по социально-культурному развитию Надежда Анисимова, командир 34-й рязанской железнодорожной бригады полковник Павел Шаров и командир батальона Владимир Воронов. За первой Божественной литургией вместе с духовенством Угрешской обители молился протоиерей Константин Сомов - настоятель войскового храма в честь Преподобного Серафима Саровского.
На праздничной трапезе, которая состоялась после богослужения, гости торжества в словах признательности наместнику Николо-Угресшкого монастыря говорили об эпохе созидания, которая открыла для современных россиян двери в Храмы Божии.
«Вкусите, и увидите, как благ Господь!» (пс. 33) – так просто современному человеку убедиться в истинности слов царя Давида. Словно свечи, вспыхивают на карте православной России золотые купола возводящихся и возрождающихся храмов, под сводами которых ежедневно приносится Бескровная Жертва - совершается величайшее спасительное Таинство Евхаристии.