这个项目是对汽车零件机油滤芯分装的时候编码进行警报机器识别楚错误编码的时候会报警编码使用正则表达式设置一个正确编码范围摄像头连接警报器使用paddleOCR和opencv相关技术pyqt5设计用户图形界面。一、定期释放并重新打开USB摄像头资源def release_capture3(cap): # 定期释放usb摄像头资源 while True: # 每隔一段时间释放一次资源这里设置为 30min time.sleep(1800) cap.release() cap.open(opt.cap_numb3)这段代码中最后的logging.disablelogging.DEBUG是用来关闭所有DEBUG级别以上的日志输出。他会禁止所有级别大于等于DEBUG的日志消息输出相当于把日志系统的全局阈值设置为DEBUG级别以上使DEBUG级别的日志被屏蔽。说白了这个函数的作用就是每隔30分钟自动重启一次摄像头time.sleep1800防止摄像头长时间运行出现卡死掉帧无响应等问题定期重启可以释放内存资源重置摄像头状态避免程序崩溃。保证长期稳定运行。########串口号 parser argparse.ArgumentParser() parser.add_argument(--SERIAL_PORT1, typestr, defaultCOM5, help第一个报警器的串口号) parser.add_argument(--SERIAL_PORT2, typestr, defaultCOM4, help第二 三个报警器的串口号) parser.add_argument(--confid_level, typefloat, default0.88, help识别的置信度) parser.add_argument(--cap_numb3, typeint, default1, help第三个摄像头编号) parser.add_argument(--frame_delay, typeint, default67, help获取画面帧数的延时) opt parser.parse_args() ######## 指令声明 LIGHT_BUZZ1 0110001A000101CE18 # 闪光声音1 LIGHT_BUZZ2 0110001A0001040E1B # 闪光声音1 LIGHT 0110001A0001028E19 # 闪光 BUZZ1 0110001A0001034FD9 # 声音1 BUZZ2 0110001A000105CFDB # 声音2 BUZZ_CMD_CLOSE 0110001A0001000FD8 # 关闭声音和闪光 logging.disable(logging.DEBUG) # 关闭日志的输出定义的串口号硬件连接配置查看串口确定警报器连接的串口。定义控制警报器的命令后续用来发送指令。串口号其实就是告诉程序连接了那个设备指令告诉程序要让这个设备做些什么。这部分配合函数sendCmdToDevice使用二、控制警报器-找出列表中出现最多的元素-筛选出OCR结果中的型号def sendCmdToDevice(cmd, ser): # 控制警报器 cmdd bytes.fromhex(cmd) ser.write(cmdd) def most_common_element(lst): # 提取列表中出现次数最多的字符 # 使用Counter统计每个元素出现的次数 count Counter(lst) # 找到出现次数最多的元素 most_common_item count.most_common(1)[0][0] return most_common_item def process_string(input_string): # 在ocr的结果中筛选出对应型号 aa[] # 用空格切分字符串 parts input_string.split() # 正则表达式1: 包含数字和字母或者纯数字 pattern_alphanumeric re.compile(r^(?.*[a-zA-Z])(?.*\d)[a-zA-Z\d-]{2,10}$) # 正则表达式2: 至少三个以上数字的纯数字 pattern_at_least_two_digits re.compile(r^\d{4,7}$) # 遍历每个切分后的部分 for part in parts: # 检查是否包含数字和字母或者纯数字 if pattern_alphanumeric.match(part) or pattern_at_least_two_digits.match(part): aa.append(part) return aa第一个函数控制警报器在上述中我们定义了几个指令采用的就是16进制这里sendCmdToDevice函数两个参数一个是16进制命令一个是串口号的作用就是通过串口发送16进制命令来控制报警器。将16进制字符串命令转为字节通过串口发送给硬件设备实现控制报警器的闪光、声音、关闭等操作。第二个函数找出列表中出现最多的元素统计列表中各元素出现的频率返回出现次数最多的那个。这个函数的一个参数是字符串列表。其实就是我们所有出现在镜头的汽车零件编码是一个字符串列表在这个列表中选出出现次数最多的字符串作为输出。其实这个函数就是对同一个零件进行多次拍照识别防止只识别一次而出错。第三个函数筛选出OCR结果中的型号也就是我们要检测的编码比如是PXxxxxL这种格式其中xxxx表示不同数字。所以这里就使用正则表达式。OCR会识别所有文字正则化表达式就会提取我们需要的那串文字。最后把这些提取到的编码添加到一个列表中。上述几个函数其实就构成了大致流程摄像头识别获取图像OCR进行文字提取加入正则表达式筛选我们需要的信息然后取众数就是我们的目标编码等编码不一致就会触发警报。三、替换易错字符-隐藏警告并停止报警-统计文本出现的次数-计算字符面积def set_bing(set_a): # 替换一些易错字符 resu set() for j in set_a: jj j.replace(0, O).replace(o, O).replace(s, 5).replace(S, 5).replace(I, 1).replace(L, 1).replace(v,V).replace(B,8).replace(p,P) resu.add(jj) return resu def hide_label_and_send_cmd(label,serNone): # 隐藏警告符号并停止报警 label.setVisible(False) # 隐藏警告符号 sendCmdToDevice(BUZZ_CMD_CLOSE, ser) def In_which(text, hun): a 0 for i in hun: if text in i: a 1 return a def are(i): # 计算字符面积 zs i[0][0] ys i[0][1] yx i[0][2] zx i[0][3] # 计算宽度为左上角到右上角的距离 width_A np.sqrt(((zs[0] - ys[0]) ** 2) ((zs[1] - ys[1]) ** 2)) # 计算宽度为左下角到右下角的距离 width_B np.sqrt(((zx[0] - yx[0]) ** 2) ((zx[1] - yx[1]) ** 2)) # 计算高度为左上角到左下角的距离 height_A np.sqrt(((zs[0] - zx[0]) ** 2) ((zs[1] - zx[1]) ** 2)) # 计算高度为右上角到右下角的距离 height_B np.sqrt(((ys[0] - yx[0]) ** 2) ((ys[1] - yx[1]) ** 2)) # 取平均值作为宽度和高度 width (width_A width_B) / 2 height (height_A height_B) / 2 # 计算面积 area width * height return area函数一这里是把OCR识别中容易混淆的字符进行标准化替换。比如说有时候字母O和数字0会混淆字母s和数字5字母i或者l会和1混淆等等……把这些易混淆的作为替换规则参数就是字符集合输出就是我们替换过的字符集合。这个函数就是为了提高识别准确率统一不同识别结果的格式。函数二关闭ui界面上的警告图标同时发送命令停止报警。输出的参数有两个一是ui标签对象而是串口对象。作用就是当识别到合法车辆或者回复正常状态的时候停止报警。函数三统计某个文本在列表中出现的次数输出参数有两个第一是我们需要查的文本第二个是我们查找的列表。其实就是在参数2中查找参数1的次数。输出就是参数有1出现的次数。这个就是用来判断某个零件编码是否在我们的名单列表中并统计出现的次数。函数四计算OCR识别框的面积输入就是OCR识别的四个角坐标点输出是识别框的面积利用坐标点求面积过滤掉面积过大或者过小的误识别结果比如噪声背景文字等四、总结以上函数其实就构成了大致流程摄像头采集-OCR识别-数据处理-匹配判断-控制报警器摄像头收集图像OCR识别文字计算每块的字符面积面积过小可能是污渍或者噪点面积太大可能是其他文字只保留正常零件编码大小面积区域其实就是进行筛选文字区域。在我们筛选出来的面积上进行识别编码利用正则表达式筛选出有效编码。然后就是数据清洗我们识别到的编码可能会因为一些字符的混淆而不统一接下来我们就把这些收集到的编码进行统一化比如s和5统一为s或者统一为5等诸如此类。此外我们还要对同一个零件进行多次识别避免一次识别出错在多次识别中选出出现次数最多众数的作为该零件的编号输出。根据我们的识别结果发送不同指令。