Я вижу некоторые приложения, которые помещают значок в панель уведомлений на моем устройстве. как мне это сделать с моим приложением?
Используйте класс NotificationManager.
http://developer.android.com/guide/appendix/faq/commontasks.html
Посмотрите на страницу, все шаги объясняются очень хорошо.