Para solucionar el problema con las R en Android studio hay que hacer:

En el menú clic en Build -> Clean Project.

Si aún así no se soluciona hay que ir a:

Tools -> Android -> Sync Project with Gradle Files

Con esto se debería solucionar el problema. Hay que tener en cuenta que la clase R es autogenerada por lo que no se puede modificar ni crear a mano.