文件操作文件夹/目录import os1、os.path.exists(path) 判断一个文件/目录是否存在只要存在相匹配的文件或目录就返回True因此当目录与文件同名时可能报错2、os.path.isdir(fname) 判断目录是否存在必须是目录才返回True3、os.makedirs(path) 多层创建目录4、os.mkdir(path) 创建目录5、os.rmdir(path) 删除目录只能删除空目录6、os.rename(原文件名新文件名) 重命名文件或文件夹注意makedirs与mkdir之间最大的区别是当父目录不存在的时候os.mkdir(path)不会创建os.makedirs(path)则会创建父目录。文件1、os.remove(path) 删除文件2、os.rename(原文件名新文件名) 重命名文件或文件夹3、os.listdir(path) 提取目录下所有文件4、os.path.isfile(fname) 判断文件是否存在必须是文件才返回True5、random.sample(file_list, n) 从file_list中随机选择n个文件--import random6、copyfile(src_path, dst_path) 将src文件内容复制到dst文件中--from shutil import copyfile7、copy(src_path, dst_path) 将src文件复制到dst文件夹中--from shutil import copy8、move(src_path, dst_path) 将src文件剪切到dst文件夹---from shutil import move9、dstos.path.join(path,../for_bitmain/img) 修改文件路径10、str.endswith(suffix[, start[, end]]) 判断字符串是否以指定后缀结尾或指定字符串如果以指定后缀结尾返回True否则返回False。可选参数start与end为检索字符串的开始与结束位置。数据格式链表1、len(list) 长度2、max(list) 最大值3、min(list) 最小值4、del(list)/del(list[i]) 删除链表或某一个元素5、list.append(obj) 插入元素6、list.count(obj) 统计某个元素出现的次数7、list.pop([index -1]) 移除一个元素并返回其值默认是最后一个8、list.sort() 排序9、list.clear() 清除10、list.copy() 复制类特殊函数__init__()等同于类的构造器初始化某个类的一个实例。__del__()等同于类的析构函数析构某个类的一个实例。__call__()使实例能够像函数一样被调用同时不影响实例本身的生命周期__call__()不影响一个实例的构造和析构。但是__call__()可以用来改变实例的内部成员的值。12345678910111213141516171819classX(object):def__init__(self, a, b,range):self.aaself.bbself.rangerangedef__del__(self, a, b,range):delself.adelself.bdelself.rangedef__call__(self, a, b):self.aaself.bbprint(__call__ with {}, {}.format(self.a,self.b)) xInstanceX(1,2,3) xInstance(1,2)__call__ with (1,2)delX一些常用函数1、enumerate(sequence, [start0])为可迭代的序列添加了一个计数器默认从0开始12345678910111213141516171819elements(foo,bar,baz)foreleminelements:...printelem...foobarbazforcount, eleminenumerate(elements):...printcount, elem...0foo1bar2bazforcount, eleminenumerate(elements,42):...printcount, elem...42foo43bar44baz2、 sep.join(seq)seq分隔符可以为空seq要连接的元素序列、字符串、元组、字典连接字符串数组。将字符串、元组、列表中的元素以指定的分隔符连接生成一个新的字符串。12345678910111213141516171819202122#对序列进行操作分别使用 与:作为分隔符 seq1[hello,good,boy,doiido]print( .join(seq1))hello good boy doiidoprint(:.join(seq1))hello:good:boy:doiido#对字符串进行操作 seq2hello good boy doiidoprint(:.join(seq2))h:e:l:l:o: :g:o:o:d: :b:o:y: :d:o:i:i:d:o#对元组进行操作 seq3(hello,good,boy,doiido)print(:.join(seq3))hello:good:boy:doiido#对字典进行操作 seq4{hello:1,good:2,boy:3,doiido:4}print(:.join(seq4))boy:good:doiido:hello常用库tqdm进度条库tqdm模块参数说明12345678910111213classtqdm(object):Decorate an iterable object, returning an iterator which acts exactlylike the original iterable, but prints a dynamically updatingprogressbar every time a value is requested.def__init__(self, iterableNone, descNone, totalNone, leaveFalse,filesys.stderr, ncolsNone, mininterval0.1,maxinterval10.0, minitersNone, asciiNone,disableFalse, unitit, unit_scaleFalse,dynamic_ncolsFalse, smoothing0.3, nestedFalse,bar_formatNone, initial0, guiFalse):iterable: 可迭代的对象, 在手动更新时不需要进行设置desc: 字符串, 左边进度条描述文字total: 总的项目数leave: bool值, 迭代完成后是否保留进度条file: 输出指向位置, 默认是终端, 一般不需要设置ncols: 调整进度条宽度, 默认是根据环境自动调节长度, 如果设置为0, 就没有进度条, 只有输出的信息unit: 描述处理项目的文字, 默认是it, 例如: 100 it/s, 处理照片的话设置为img ,则为 100 img/sunit_scale: 自动根据国际标准进行项目处理速度单位的换算, 例如 100000 it/s 100k it/s常用函数使用方法1.tqdm(iterator)基于迭代器运行123456789101112131415161718importtimefromtqdmimporttqdm, trange#trange(i)是tqdm(range(i))的一种简单写法foriintrange(100):time.sleep(0.05)foriintqdm(range(100), descProcessing):time.sleep(0.05)dic[a,b,c,d,e]pbartqdm(dic)foriinpbar:pbar.set_description(Processing i)time.sleep(0.2)100%|██████████|100/100[00:0600:00,16.04it/s]Processing:100%|██████████|100/100[00:0600:00,16.05it/s]Processing e:100%|██████████|5/5[00:0100:00,4.69it/s]手动进行更新123456789101112importtimefromtqdmimporttqdmwith tqdm(total200) as pbar:pbar.set_description(Processing:)# total表示总的项目, 循环的次数20*10(每次更新数目) 200(total)foriinrange(20):# 进行动作, 这里是过0.1stime.sleep(0.1)# 进行进度更新, 这里设置10个pbar.update(10)Processing::100%|██████████|200/200[00:0200:00,91.94it/s]yacs参数配置库简介yacs是作为一个轻量级库创建的用于定义和管理系统配置比如那些通常可以在为科学实验设计的软件中找到的配置。这些“配置”通常包括用于训练机器学习模型的超参数或可配置模型超参数(如卷积神经网络的深度)等概念。由于您正在进行科学研究所以再现性是最重要的因此您需要一种可靠的方法来序列化实验配置。使用方法1、初始化并赋值12345678910111213141516171819202122232425262728# my_project/config.pyfromyacs.configimportCfgNode as CN_CCN()_C.SYSTEMCN()# Number of GPUS to use in the experiment_C.SYSTEM.NUM_GPUS8# Number of workers for doing things_C.SYSTEM.NUM_WORKERS4_C.TRAINCN()# A very important hyperparameter_C.TRAIN.HYPERPARAMETER_10.1# The all important scales for the stuff_C.TRAIN.SCALES(2,4,8,16)defget_cfg_defaults():Get a yacs CfgNode object with default values for my_project.# Return a clone so that the defaults will not be altered# This is for the local variable use patternreturn_C.clone()# Alternatively, provide a way to import the defaults as# a global singleton:# cfg _C # users can from config import cfg2、解析yaml文件config.yaml123456789101112GPUS: (0,1,2,3)OUTPUT_DIR:outputCUDNN:ENABLED: trueMODEL:NAME:yoloPRETRAINED:xx.pthEXTRA:FINAL_CONV_KERNEL:1STAGE2:NUM_MODULES:1config.py1234567891011121314151617181920212223242526272829303132333435importosfromyacs.configimportCfgNode as CNclassconfig():def__init__(self):self.cfgCN()self.cfg.GPUS(0,1,2,3)self.cfg.OUTPUT_DIRoutputself.cfg.CUDNNCN()self.cfg.CUDNN.ENABLEDTrueself.cfg.MODELCN()self.cfg.MODEL.NAMEself.cfg.MODEL.PRETRAINEDself.cfg.MODEL.EXTRACN()self.cfg.MODEL.EXTRA.FINAL_CONV_KERNEL0self.cfg.MODEL.EXTRA.STAGE2CN()self.cfg.MODEL.EXTRA.STAGE2.NUM_MODULES0defget_cfg(self):returnself.cfg.clone()defload(self,config_file):self.cfg.OUTPUT_DIRself.cfg.defrost()self.cfg.merge_from_file(config_file)self.cfg.freeze()if__name____main__:ccconfig()cc.load(test.yaml)print(cc.cfg)print(cc.get_defalut_cfg())logging日志库 使用方法1、将控制台的输出写入文件中1234567891011121314151617importloggingdefsetLog():log_fileL:/log/console.loghead%(asctime)-15s %(message)slogging.basicConfig(filenamestr(log_file),formathead)loggerlogging.getLogger()logger.setLevel(logging.INFO)consolelogging.StreamHandler()logging.getLogger().addHandler(console)returnloggerif__name____main__:loggersetLog()logger.info(input message)到此这篇关于Python常用函数及常用库整理的文章就介绍到这了