Buenas
Ya no tengo el Note 4 pero Marshmallow trae esta opción por defecto aunque por aplicación, no en general.
Ajustes > Aplicaciones > Whatsapp > Notificaciones > Permitir dar un vistazo/Preview en popups (el nombre varía dependiendo del terminal)
Desactivando esa opción no recibirás notificaciones heads up, te he puesto el ejemplo con whatsapp pero puedes hacerlo con cualquiera.
Espero que te sirva, un saludo