亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > Python > 正文

python生成lmdb格式的文件實例

2020-02-15 23:34:46
字體:
來源:轉載
供稿:網友

在crnn訓練的時候需要用到lmdb格式的數據集,下面是python生成lmdb個是數據集的代碼,注意一定要在linux系統下,否則會讀入圖像的時候出問題,可能遇到的問題都在代碼里面注釋了,看代碼即可。

#-*- coding:utf-8 -*- import osimport lmdb#先pip install這個模塊哦import cv2import globimport numpy as np  def checkImageIsValid(imageBin): if imageBin is None:  return False imageBuf = np.fromstring(imageBin, dtype=np.uint8) img = cv2.imdecode(imageBuf, cv2.IMREAD_GRAYSCALE) if img is None:  return False imgH, imgW = img.shape[0], img.shape[1] if imgH * imgW == 0:  return False return True def writeCache(env, cache): with env.begin(write=True) as txn:  for k, v in cache.iteritems():   txn.put(k, v) def createDataset(outputPath, imagePathList, labelList, lexiconList=None, checkValid=True): """ Create LMDB dataset for CRNN training.# ARGS:  outputPath : LMDB output path  imagePathList : list of image path  labelList  : list of corresponding groundtruth texts  lexiconList : (optional) list of lexicon lists  checkValid : if true, check the validity of every image """ # print (len(imagePathList) , len(labelList)) assert(len(imagePathList) == len(labelList)) nSamples = len(imagePathList) print '...................' env = lmdb.open(outputPath, map_size=8589934592)#1099511627776)所需要的磁盤空間的最小值,之前是1T,我改成了8g,否則會報磁盤空間不足,這個數字是字節  cache = {} cnt = 1 for i in xrange(nSamples):  imagePath = imagePathList[i]  label = labelList[i]  if not os.path.exists(imagePath):   print('%s does not exist' % imagePath)   continue  with open(imagePath, 'r') as f:   imageBin = f.read()  if checkValid:   if not checkImageIsValid(imageBin):    print('%s is not a valid image' % imagePath)#注意一定要在linux下,否則f.read就不可用了,就會輸出這個信息    continue   imageKey = 'image-%09d' % cnt  labelKey = 'label-%09d' % cnt  cache[imageKey] = imageBin  cache[labelKey] = label  if lexiconList:   lexiconKey = 'lexicon-%09d' % cnt   cache[lexiconKey] = ' '.join(lexiconList[i])  if cnt % 1000 == 0:   writeCache(env, cache)   cache = {}   print('Written %d / %d' % (cnt, nSamples))  cnt += 1 nSamples = cnt - 1 cache['num-samples'] = str(nSamples) writeCache(env, cache) print('Created dataset with %d samples' % nSamples)  def read_text(path):  with open(path) as f:  text = f.read() text = text.strip()  return text  if __name__ == '__main__': # lmdb 輸出目錄 outputPath = 'D:/ruanjianxiazai/tuxiangyangben/fengehou/train'#訓練集和驗證集要跑兩遍這個程序,分兩次生成  path = "D:/ruanjianxiazai/tuxiangyangben/fengehou/chenguang/*.jpg"#將txt與jpg的都放在同一個文件里面 imagePathList = glob.glob(path) print '------------',len(imagePathList),'------------' imgLabelLists = [] for p in imagePathList:  try:   imgLabelLists.append((p, read_text(p.replace('.jpg', '.txt'))))  except:   continue    # imgLabelList = [ (p, read_text(p.replace('.jpg', '.txt'))) for p in imagePathList] # sort by labelList imgLabelList = sorted(imgLabelLists, key = lambda x:len(x[1])) imgPaths = [ p[0] for p in imgLabelList] txtLists = [ p[1] for p in imgLabelList]  createDataset(outputPath, imgPaths, txtLists, lexiconList=None, checkValid=True)             
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
日韩最新在线视频| 色婷婷亚洲mv天堂mv在影片| 欧美成人小视频| 狠狠色狠狠色综合日日小说| 欧美精品手机在线| 亚洲天堂av女优| 久久久噜噜噜久久久| 国产精品视频久久久久| 欧美成人中文字幕在线| 久久人人爽人人爽人人片av高清| 性欧美长视频免费观看不卡| 国产精品视频一区二区高潮| 亚洲淫片在线视频| 国产在线精品播放| 韩日欧美一区二区| 亚洲第一区第二区| 欧美老女人xx| 国产欧亚日韩视频| 国产精品久久久久秋霞鲁丝| 91在线无精精品一区二区| 成人网在线免费看| 亚洲欧洲午夜一线一品| 日本精品va在线观看| 日韩免费高清在线观看| 国内外成人免费激情在线视频| 亚洲最新av在线| 欧美午夜性色大片在线观看| 欧美午夜xxx| 97超级碰在线看视频免费在线看| 91久久综合亚洲鲁鲁五月天| 久久成人亚洲精品| 91成人精品网站| 日韩精品在线电影| 国产精品久久久久久久久免费看| 久久九九热免费视频| 国产一区二区三区三区在线观看| 欧美激情一区二区三区在线视频观看| 日韩欧美精品在线观看| 欧美午夜片在线免费观看| 日韩av电影中文字幕| 日韩成人高清在线| 92国产精品久久久久首页| 欧美色视频日本高清在线观看| 亚洲国产精品美女| 日本亚洲欧美成人| 亚洲一区亚洲二区亚洲三区| 成人国产精品日本在线| 国产精彩精品视频| 黑人巨大精品欧美一区二区免费| 国外成人免费在线播放| 欧美大片在线看| 成人午夜在线视频一区| 4438全国亚洲精品在线观看视频| 国产色视频一区| 日韩精品日韩在线观看| 黑人欧美xxxx| 久久久之久亚州精品露出| 国产精品美女免费看| 一区二区三区在线播放欧美| 欧美精品18videosex性欧美| 久久免费成人精品视频| 欧美在线性爱视频| 欧美一区二区三区艳史| 国产精品一久久香蕉国产线看观看| 国产精品亚洲综合天堂夜夜| 亚洲女人被黑人巨大进入al| 日韩电影免费在线观看| 欧美综合第一页| 亚洲性生活视频| 日本中文字幕成人| 亚洲影院色无极综合| 欧美高清自拍一区| 91久久久久久久一区二区| 欧美巨猛xxxx猛交黑人97人| 国产精品永久在线| 国产欧美日韩91| 97视频免费看| 欧美午夜视频在线观看| 亚洲伊人成综合成人网| 亚洲精品影视在线观看| 国产成人中文字幕| 欧美一级片免费在线| 午夜免费日韩视频| 欧美一级大片视频| 人人澡人人澡人人看欧美| 亚洲丝袜在线视频| 日韩精品久久久久久福利| 国内精品小视频| 日韩欧美一区二区三区久久| 亚洲国产精品成人av| 亚洲国产欧美一区二区三区同亚洲| 亚洲永久在线观看| 日韩av网站导航| 成人免费高清完整版在线观看| 欧美日韩亚洲国产一区| 国产深夜精品福利| 成人精品一区二区三区| 中文欧美日本在线资源| 日本国产精品视频| 538国产精品视频一区二区| 成人激情免费在线| 在线观看精品国产视频| 久久精品视频99| 欧美日韩一区二区三区| 日韩av电影院| 国产精品69精品一区二区三区| 中文字幕在线精品| 日韩黄色高清视频| 亚洲精品成人久久久| 国产精品日韩在线一区| 大荫蒂欧美视频另类xxxx| 亚洲国产私拍精品国模在线观看| 精品久久久久久国产| 色青青草原桃花久久综合| 一区二区欧美亚洲| 伊人久久大香线蕉av一区二区| 日韩久久精品电影| 成人免费淫片视频软件| 亚洲伊人第一页| 国产精品日韩在线一区| 精品久久久久久亚洲国产300| 在线日韩精品视频| 91精品在线播放| 久久在线免费观看视频| 91亚洲国产成人久久精品网站| 一级做a爰片久久毛片美女图片| 日韩av色综合| 国产一区深夜福利| 亚洲欧洲日本专区| 亚洲一区二区中文| 欧美另类99xxxxx| 91精品国产91久久| 成人免费大片黄在线播放| 中文字幕欧美精品在线| 日韩av色在线| 久久精品国产欧美亚洲人人爽| 国产精品久久国产精品99gif| 欧美夫妻性视频| 色一区av在线| 中文字幕日韩欧美| 国产精品久久久久久久久男| 亚洲最大中文字幕| 日韩av在线一区| 日本精品中文字幕| 国产999视频| 亚洲自拍高清视频网站| 黑人巨大精品欧美一区二区三区| 亚洲欧洲xxxx| 日韩最新免费不卡| 日韩av中文字幕在线播放| 久久99视频精品| 日韩av在线免费| 中文字幕亚洲欧美在线| 久久久久亚洲精品成人网小说| 欧美午夜电影在线| 国产精品爽黄69天堂a| 国产精品69精品一区二区三区| 国产精品视频午夜| 色999日韩欧美国产| 欧美在线欧美在线| 97香蕉超级碰碰久久免费软件| 日韩欧美亚洲一二三区| 欧美巨大黑人极品精男| 日韩精品在线视频观看|