Era filho de Rodrigo Antônio de Lemos, imigrante português que se estabeleceu no arraial de São Gonçalo do Sapucaí . Foi casado com Luíza Amália de Lemos, que o deixou viúvo em 22 de novembro de 1842. Foi o pioneiro na industrialização de chapéus no Brasil, tendo sua fábrica sido instalada no ano de 1825 na cidade sul mineira de São Gonçalo do Sapucaí, com tecnologia importada de França. Foi a primeira fábrica de chapéus de Minas Gerais e uma das primeiras do Império. Para que tal tecnologia e métodos fossem trazidos de Europa ao Brasil, o barão enviou seu filho Lúcio de Lemos à França.