A mi forma de ver, la diferencia entre ambos dispositivos es... la pantalla. Porque el hardware de ambos se basta y se sobra para darle caña a lo que le instales.
Si tienes claro que quieres un Nexus 4 empieza por ahí, y cuando lo tengas y lo hayas usado unos días decide el siguiente paso. La Nexus 7 igual sólo te supone una pequeña ganancia de pantalla.
En mi caso, la Nexus 7 me viene genial porque mi HTC Desire está muy anticuado. Es pequeño, tiene poca pantalla, se me queda corto en hardware, y hay muchas aplicaciones que no puedo instalar por la versión de Android que lleva. En mi caso, en lugar de gastarme una pasta en un nuevo teléfono compré la Nexus 7. Si me lo hubiera planteado ahora, con el precio de la Nexus 4, quizá hubiera tomado otra decisión.