Всё очень просто и прозрачно)

1. Открываем изображение. Заранее обработайте его как вам необходимо и под конец (закругление краёв) подготовьте его одним слоем.

http://i076.radikal.ru/0907/67/f02fe5e79068t.jpg
2. Теперь нам надо убрать замочек в слоях *если он есть* (изображение 1). Копируем изображение нажимая Ctrl + J и удаляем первый слой (задний план).

3. Теперь когда убрали замочек выбираем инструмент прямоугольник со скруглёнными краями (изображение 2 №1) - вверху видим настройку. Стандартный радиус (параметр округления углов) - 20 пикселей, можете выставлять по своему вкусу. И рисуем вот такую рамочку.
http://i068.radikal.ru/0907/40/9dd4a8087107t.jpg

4. Когда нарисовали рамочку нажимаем Ctrl + Enter и получаем такую мигающую обводку.
5. Выбираем инструмент №2 показанный на изображении №2 щёлкаем по изображению правой кнопкой мыши и в открывшемся окошке выбираем - Инверсия выделенной области (изображение №3)
http://i038.radikal.ru/0907/6f/1bc3803dfed4t.jpg
6. Должно получиться вот такое: http://i080.radikal.ru/0907/06/e812a649f2edt.jpg

7. Нажимаем Delete и сохраняем изображение в PNG формате.

Вот что получилось:
http://s19.radikal.ru/i192/0907/d2/a1c4df13cb48.png