По окончании курса в московском университете поместил в «Журнале Министерства Народного Просвещения» ряд рецензий и историко-литературных статей; был инспектором и директором гимназий и Лазаревского института в Москве. С 1864 по 1879 год управлял Кавказским учебным округом, где заботился об открытии русских народных школ и распространении русского языка; позже состоял членом совета министра народного просвещения.
Неверов был личным другом Станкевича и Грановского, находился в близких сношениях и переписке со многими писателями и учёными (И. С. Тургеневым, В. В. Григорьевым, бароном Н. А. Корфом и др.) и оставил «Воспоминания», отрывки из которых печатались в «Русской Старине» («И. С. Тургенев в воспоминаниях Я. М. Неверова», 1883, т. XL; «Грановский», 1880, т. XXVII; «Из крепостного быта», 1883, т. XL и др.). Из педагогических его статей наибольшее значение имели в свое время статьи «О том, что нужно для народного образования в России» («Русский Педагогический Вестник», 1857, № 4) и «К вопросу о наших гимназиях» («Ж. М. Н. Пр.», 1869, № 11).
