尝试：

if let phone = number.value as? CNPhoneNumber {
    print(phone.stringValue)
} else {
   print("number.value not of type CNPhoneNumber")
}

还可以查看 CNContact ， CNPhoneNumber