从身份证号码中获取性别、出生日期、籍贯，并更新mongodb

　　有这样的需求，人员信息是存在mongodb中，需要存放人员的身份证、性别、出生日期、籍贯等信息。通过脚本导入这些信息，但是只导入了身份证号码，其他信息空缺。现在需要补全其他信息。

　　其实身份证信息就包含了性别、出生日期、籍贯信息。公民身份号码是特征组合码，由前十七位数字本体码和最后一位数字校验码组成。排列顺序从左至右依次为六位数字地址码，八位数字出生日期码，三位数字顺序码和一位数字校验码。

　　地址码：表示编码对象常住户口所在县(市、旗、区)的行政区划代码。

　　出生日期码：表示编码对象出生的年、月、日，年、月、日代码之间不用分隔符，格式为YYYYMMDD，如19880328。

　　顺序码：表示在同一地址码所标识的区域范围内，对同年、同月、同日出生的人编定的顺序号，顺序码的奇数分配给男性，偶数分配给女性。

　　校验码：根据本体码，通过采用ISO 7064:1983,MOD 11-2校验码系统计算出校验码。前面有提到数字校验码，我们知道校验码也有X的，实质上为罗马字符X，相当于10.

　　实现思路很简单了，就是得到所有有身份证号码等纪录，解析身份证号码，获取性别、出生日期、籍贯信息，再更新mongodb。

想到了两种技术方案解决：python脚本和JavaScript。

1、python脚本

　　python需要使用pymongo，用于操作mongodb，需要引入。python代码直接在终端执行就行。python test.py

  1 # encoding=utf-8
  2 
  3 '''
  4 Created on 2017年12月22日
  5 mongodb中存放人像信息，有身份证号码，无性别、籍贯、出生日期，需要根据mongodb中身份证字段，获取性别、籍贯、出生日期，更新到mongodb中
  6 
  7 @author: tim
  8 '''
  9 
 10 import re
 11 from pymongo import MongoClient  #需要引入pymongo，用于连接mongodb
 12 from datetime import datetime
 13 
 14 logPath = "/Users/tim/updatemongo/log/log.txt" #日志
 15 
 16 #身份证前两位代表的省市，作为籍贯
 17 area = {"11":"北京", "12":"天津", "13":"河北", "14":"山西", "15":"内蒙古", "21":"辽宁", "22":"吉林", "23":"黑龙江", "31":"上海", "32":"江苏", "33":"浙江", "34":"安徽", "35":"福建", "36":"江西", "37":"山东", "41":"河南", "42":"湖北", "43":"湖南", "44":"广东", "45":"广西", "46":"海南", "50":"重庆", "51":"四川", "52":"贵州", "53":"云南", "54":"西藏", "61":"陕西", "62":"甘肃", "63":"青海", "64":"宁夏", "65":"新疆", "71":"台湾", "81":"香港", "82":"澳门", "91":"国外"}
 18 
 19 
 20 # 身份证有效性校验
 21 def checkIdcard(idcard):
 22     Messages = ['验证通过!', '身份证号码位数不对!', '身份证号码出生日期超出范围或含有非法字符!', '身份证号码校验错误!', '身份证地区非法!']
 23     
 24     idcard = str(idcard) #身份证号码转成字符串
 25     idcard = idcard.strip() #移除字符串头尾指定的字符（默认为空格）
 26     idcard_list = list(idcard) #转成列表
 27     
 28     # 地区校验
 29     if(not area[(idcard)[0:2]]):
 30         return Messages[4]
 31         
 32     # 15位身份号码检测
 33     if(len(idcard) == 15):
 34         if((int(idcard[6:8]) + 1900) % 4 == 0 or((int(idcard[6:8]) + 1900) % 100 == 0 and (int(idcard[6:8]) + 1900) % 4 == 0)):
 35             ereg = re.compile('[1-9][0-9]{5}[0-9]{2}((01|03|05|07|08|10|12)(0[1-9]|[1-2][0-9]|3[0-1])|(04|06|09|11)(0[1-9]|[1-2][0-9]|30)|02(0[1-9]|[1-2][0-9]))[0-9]{3}$')
 36         else:
 37             ereg = re.compile('[1-9][0-9]{5}[0-9]{2}((01|03|05|07|08|10|12)(0[1-9]|[1-2][0-9]|3[0-1])|(04|06|09|11)(0[1-9]|[1-2][0-9]|30)|02(0[1-9]|1[0-9]|2[0-8]))[0-9]{3}$')
 38         
 39         # 测试出生日期的合法性
 40         if(re.match(ereg, idcard)):
 41             return Messages[0]
 42         else:
 43             return Messages[2]
 44             
 45     # 18位身份号码检测
 46     elif(len(idcard) == 18):
 47         # 出生日期的合法性检查
 48         # 闰年月日:((01|03|05|07|08|10|12)(0[1-9]|[1-2][0-9]|3[0-1])|(04|06|09|11)(0[1-9]|[1-2][0-9]|30)|02(0[1-9]|[1-2][0-9]))
 49         # 平年月日:((01|03|05|07|08|10|12)(0[1-9]|[1-2][0-9]|3[0-1])|(04|06|09|11)(0[1-9]|[1-2][0-9]|30)|02(0[1-9]|1[0-9]|2[0-8]))
 50         if(int(idcard[6:10]) % 4 == 0 or (int(idcard[6:10]) % 100 == 0 and int(idcard[6:10]) % 4 == 0)):
 51             ereg = re.compile('[1-9][0-9]{5}19[0-9]{2}((01|03|05|07|08|10|12)(0[1-9]|[1-2][0-9]|3[0-1])|(04|06|09|11)(0[1-9]|[1-2][0-9]|30)|02(0[1-9]|[1-2][0-9]))[0-9]{3}[0-9Xx]$')  # //闰年出生日期的合法性正则表达式
 52         else:
 53             ereg = re.compile('[1-9][0-9]{5}19[0-9]{2}((01|03|05|07|08|10|12)(0[1-9]|[1-2][0-9]|3[0-1])|(04|06|09|11)(0[1-9]|[1-2][0-9]|30)|02(0[1-9]|1[0-9]|2[0-8]))[0-9]{3}[0-9Xx]$')  # //平年出生日期的合法性正则表达式
 54     
 55         # 测试出生日期的合法性
 56         if(re.match(ereg, idcard)):
 57             # 计算校验位
 58             S = (int(idcard_list[0]) + int(idcard_list[10])) * 7 + (int(idcard_list[1]) + int(idcard_list[11])) * 9 + (int(idcard_list[2]) + int(idcard_list[12])) * 10 + (int(idcard_list[3]) + int(idcard_list[13])) * 5 + (int(idcard_list[4]) + int(idcard_list[14])) * 8 + (int(idcard_list[5]) + int(idcard_list[15])) * 4 + (int(idcard_list[6]) + int(idcard_list[16])) * 2 + int(idcard_list[7]) * 1 + int(idcard_list[8]) * 6 + int(idcard_list[9]) * 3
 59             Y = S % 11
 60             M = "F"
 61             JYM = "10X98765432"
 62             M = JYM[Y]  # 判断校验位
 63             if(M == idcard_list[17]):  # 检测ID的校验位
 64                 return Messages[0]
 65             else:
 66                 return Messages[3]
 67         else:
 68             return Messages[2]
 69     else:
 70         return Messages[1]
 71 
 72 
 73 # 获取身份证信息
 74 def getIdInfo(idcard):
 75     checkresult = checkIdcard(idcard)
 76     if checkresult == '验证通过!':    
 77         idcard = str(idcard)
 78         idcard = idcard.strip()
 79         ID_address = (idcard)[0:2]  # 前两位是籍贯
 80         ID_sex = idcard[14:17]  # 14位之后表示性别
 81         
 82         if(len(idcard) == 15):
 83             ID_birth = '19' + idcard[6:12]  # 获取15位身份证出生年月日，补全19
 84         else:    
 85             ID_birth = idcard[6:14]  # 获取18位身份证出生年月日
 86     
 87         strAddress = area[ID_address]  # 籍贯
 88         strGender = 'male'  # 性别
 89         
 90         year = ID_birth[0:4]
 91         moon = ID_birth[4:6]
 92         day = ID_birth[6:8]
 93         strBirthDate = year + '-' + moon + '-' + day  # 出生日期
 94     
 95         if int(ID_sex) % 2 == 0:
 96             strGender = 'female'
 97         else:
 98             strGender = 'male'
 99             
100         # print '籍贯', strAddress
101         # print '性别', strGender
102         # print '出生日期', strBirthDate
103         
104         idInfo = [strAddress, strGender, strBirthDate]
105         
106         return idInfo
107     else:
108         writeLog("异常:"+idcard+checkresult)
109             
110         print idcard, checkresult
111         return 0;
112 
113 
114 # 读取mongodb身份证信息，更新mongodb
115 # serverIp mongodb服务器IP
116 # port mongodb服务器端口
117 # dbName 要连接的数据库名称
118 # collectionName 数据库集合名称
119 def updateMongoInfo(serverIp, port, dbName, collectionName):
120     client = MongoClient(serverIp, port)  # 连接mongodb数据库
121     db = client[dbName]  # 指定数据库名称
122     collection = db[collectionName]  # 获取集合名
123     
124     log = open(logPath, 'a')
125     log.writelines([datetime.now().strftime('%Y-%m-%d %H:%M:%S'), "，开始更新……", "\n"])
126     print datetime.now().strftime('%Y-%m-%d %H:%M:%S'), "，开始更新……", "\n"
127 
128     # 查找身份证号码不为空的记录，才执行
129     for i in collection.find({'id_card':{"$ne":""}}):
130         result = getIdInfo(i['id_card'])
131         if(result != 0):
132             log.writelines([datetime.now().strftime('%Y-%m-%d %H:%M:%S'), "，更新，", i['idcard'], result[0], result[1], result[2], "\n"])
133             print i['id_card'], result
134             collection.update({"id_card":i['id_card']}, {"$set":{"address":result[0], "gender":result[1], "birth_date":result[2]}})
135             
136     log.writelines([datetime.now().strftime('%Y-%m-%d %H:%M:%S'), "，更新结束……", "\n"])
137     log.close()
138     print datetime.now().strftime('%Y-%m-%d %H:%M:%S'), "，更新结束……", "\n"
139  
140 
141 # 写日志
142 def writeLog(content):
143     with open(logPath, 'w+') as log:
144         log.writelines([datetime.now().strftime('%Y-%m-%d %H:%M:%S'), " ", content, "\n"])
145             
146 
147 # 入口函数
148 def start(logPath,serverIp, port, dbName, collectionName):
149     logPath=logPath
150     updateMongoInfo(serverIp, port, dbName, collectionName)
151 
152 
153 # 测试
154 start('/Users/tim/updatemongo/log/log.txt','127.0.0.1', 27017, 'tim', 'person')
155

View Code