A ver...si lo que buscas es usar el stylus imagino que sí, pero no vas a mejorar prácticamente nada. La batería, 1gb más de ram y un poco la cámara...por otra parte pierdes 32gb de espacio, que si lo sabes aprovechar con tarjetas micro sd y demás le puedes sacar rendimiento. Te en cuenta que llevan el mismo procesador, por lo cual ya sabes cómo va en ese aspecto. Por contra, creo que no actualizaron tanto la versión de android del note 5, el s6 flat está más actualizado me parece.
Cuestión de gustos, vamos.