Boa noite amigo, esse utilitário Chars XP V2 - Clica Aqui ele ajuda na criação da sprite de personagens, você seleciona a roupa e assim por diante, e ele vai gerar um modelo de 4x4 ai você o altera com PS ou PAINT MESMO para deixar 4x3, uma fila em movimento, uma parada e a ultima em movimento, como esse exemplo:

obs: Não esqueça de deixar o fundo transparente.

Por exemplo eu uso o Cristal Shire e estou usando os gráficos do RMXP, só precisa fazer algumas adaptações, pois na minha opinião e um gráfico mais atrativo que as sprites dos personagens são virados em cabeça aksoskso

Da sim amigo, no RMXP tem uma opção nos resources que é exportar, você pode utilizar tilesets, ícone, caracteres etc, fazendo as devidas alterações para que a imagem fique legal no seu projeto.