ライブラリから選択時に画像を保存したくない

前提・実現したいこと

UIPickerViewとUIAlertActionを利用して、画像をサーバーにアップロードする仕組みを作っています。
そこでまずライブラリとカメラで撮影したものをUIImageViewに表示するものを作りました。
カメラ撮影したものはカメラロールに保存しようと思いコードを書いたのですが、
このままではライブラリから読み込んだものも再度保存してしまいます。

カメラで撮影したものとライブラリで選択したものを区別する方法
もしくは別の保存方法についてご教授願いたいです。

画像の選択後のコード（抜粋）

func imagePickerController(picker: UIImagePickerController, didFinishPickingMediaWithInfo info: [String : AnyObject]) {
        let image = info[UIImagePickerControllerOriginalImage]
        imageView.image = image as? UIImage
        UIImageWriteToSavedPhotosAlbum((image as? UIImage)!, nil, nil, nil)
        imagePicker.dismissViewControllerAnimated(true, completion: nil)
    }

コード全文

import UIKit

class ViewController: UIViewController, UIImagePickerControllerDelegate, UINavigationControllerDelegate {

    @IBOutlet weak var imageView: UIImageView!

    private var imagePicker = UIImagePickerController()

    override func viewDidLoad() {
        super.viewDidLoad()

        imagePicker.delegate = self
        imagePicker.allowsEditing = false
    }

    override func didReceiveMemoryWarning() {
        super.didReceiveMemoryWarning()
        // Dispose of any resources that can be recreated.
    }

    func imagePickerController(picker: UIImagePickerController, didFinishPickingMediaWithInfo info: [String : AnyObject]) {
        let image = info[UIImagePickerControllerOriginalImage]
        imageView.image = image as? UIImage
        UIImageWriteToSavedPhotosAlbum((image as? UIImage)!, nil, nil, nil)
        imagePicker.dismissViewControllerAnimated(true, completion: nil)
    }

    @IBAction func picturePicker(sender: UIButton) {
        let alert: UIAlertController = UIAlertController(title: nil, message: nil, preferredStyle: UIAlertControllerStyle.ActionSheet)
        let picker: UIAlertAction = UIAlertAction(title: "ライブラリから選択", style: UIAlertActionStyle.Default, handler: {
            (action: UIAlertAction!) -> Void in
            self.selectPicker()
        })
        let camera: UIAlertAction = UIAlertAction(title: "カメラで撮影", style: UIAlertActionStyle.Default, handler: {
            (action: UIAlertAction!) -> Void in
            self.takePicture()
        })
        let cancel: UIAlertAction = UIAlertAction(title: "キャンセル", style: UIAlertActionStyle.Cancel, handler: nil)
        alert.addAction(picker)
        alert.addAction(camera)
        alert.addAction(cancel)

        presentViewController(alert, animated: true, completion: nil)
    }

    func selectPicker() {
        if UIImagePickerController.isSourceTypeAvailable(UIImagePickerControllerSourceType.PhotoLibrary) {
            imagePicker.sourceType = UIImagePickerControllerSourceType.PhotoLibrary
            self.presentViewController(imagePicker, animated: true, completion: nil)
        }
    }

    func takePicture() {
        if UIImagePickerController.isSourceTypeAvailable(UIImagePickerControllerSourceType.Camera) {
            imagePicker.sourceType = UIImagePickerControllerSourceType.Camera
            self.presentViewController(imagePicker, animated: true, completion: nil)
        }
    }

}

試したこと

didFinishPickingMediaWithInfoのinfoの中身を見てみたのですが、
特段区別ができるものは見当たりませんでした。

補足情報(言語/FW/ツール等のバージョンなど)

・Xcode7.3.1
・Swift2.2