C'est très simple à réaliser
Si vous voulez le modifier dans le code, appelez :
setTitle("My new title");
getActionBar().setIcon(R.drawable.my_icon);
Et définissez les valeurs comme vous le souhaitez.
Ou, dans le fichier XML du manifeste Android :
<activity android:name=".MyActivity"
android:icon="@drawable/my_icon"
android:label="My new title" />
Pour activer le bouton retour dans votre application, utilisez :
getActionBar().setHomeButtonEnabled(true);
getActionBar().setDisplayHomeAsUpEnabled(true);
Le code doit être placé dans votre onCreate
afin que le changement d'étiquette/icône soit transparent pour l'utilisateur, mais en réalité, il peut être appelé n'importe où au cours du cycle de vie de l'activité.