婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > 解決tensorflow模型壓縮的問題_踩坑無數,總算搞定

解決tensorflow模型壓縮的問題_踩坑無數,總算搞定

熱門標簽:地圖地圖標注有嘆號 螳螂科技外呼系統怎么用 阿里電話機器人對話 遼寧智能外呼系統需要多少錢 電銷機器人系統廠家鄭州 qt百度地圖標注 舉辦過冬奧會的城市地圖標注 正安縣地圖標注app 400電話申請資格

1.安裝bazel,從github上下載linux版的.sh文件,然后安裝

2.從GitHub上下載最新的TensorFlow源碼

3.進入TensorFlow源碼文件夾,輸入命令

bazel build tensorflow/tools/graph_transforms:transform_graph

這里會遇到各種坑,比如

ERROR: /opt/tf/tensorflow-master/tensorflow/core/kernels/BUILD:3044:1: C++ compilation of rule ‘//tensorflow/core/kernels:matrix_square_root_op' failed (Exit 4)

gcc: internal compiler error: Killed (program cc1plus)

這個錯誤是cpu負荷太大,需要加行代碼

# 生成swap鏡像文件
sudo dd if=/dev/zero of=/mnt/512Mb.swap bs=1M count=512
# 對該鏡像文件格式化
sudo mkswap /mnt/512Mb.swap
# 掛載該鏡像文件 
sudo swapon /mnt/512Mb.swap

又或者這個@aws Error downloading

我看csdn有的博主解決方法是去臨時文件夾刪掉文件重新下載,但是我這邊發現沒用,我這邊的解決方法是運行bazel前先輸入一條命令:

sed -i '\@https://github.com/aws/aws-sdk-cpp/archive/1.5.8.tar.gz@aws' tensorflow/workspace.bzl

命令里的網址就是實際要下載的文件的地址,因為有的地址可能改了

到這里編譯bazel就完成了

4.編譯完了就可以模型壓縮了,也是一行代碼,in_graph為輸入模型路徑,outputs不動,out_graph為輸出模型路徑,transforms就填一個quantize_weights就可以了,這個就是把32bit轉成8bit的,也是此方法最有效的一步;我看有的博主還先編譯summary然后打印出輸入輸出結點,之后再輸入一大堆參數,還刪除一些結點啥的,我這邊都試了,最終也并沒有更縮減模型大小,所以就這樣就可以了。

bazel-bin/tensorflow/tools/graph_transforms/transform_graph --in_graph=../model/ctpn.pb  --outputs='output_node_name'  --out_graph=../model/quantized_ctpn.pb  --transforms='quantize_weights'

最終從68m縮減到17m,75%的縮減比例,實測效果基本沒啥差別,這方法還是很管用的。

補充:模型壓縮一二三之tensorflow查看ckpt模型里的參數和數值

查看ckpt模型參數和數值

import os
from tensorflow.python import pywrap_tensorflow
checkpoint_path = os.path.join("你的模型的目錄>", "./model.ckpt-11000") 
# Read data from checkpoint file
reader = pywrap_tensorflow.NewCheckpointReader(checkpoint_path)
var_to_shape_map = reader.get_variable_to_shape_map()
# Print tensor name and values
for key in var_to_shape_map:
 print("tensor_name: ", key)
 print(reader.get_tensor(key))

注意:

1、"你的模型目錄>“是指你的meta、ckpt這些模型存儲的路徑。

比如路徑”/models/model.ckpt-11000.meta"這種,那么"你的模型目錄>“就是”/models"

2、當目錄下有多個ckpt時,取最新的model名字到ckpt-最大數字>就可以了,后面不用了。

以上為個人經驗,希望能給大家一個參考,也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方,望不吝賜教。

您可能感興趣的文章:
  • 淺談Tensorflow 動態雙向RNN的輸出問題
  • TensorFlow實現RNN循環神經網絡
  • Tensorflow與RNN、雙向LSTM等的踩坑記錄及解決

標簽:昭通 隨州 信陽 合肥 阜新 濟源 淘寶好評回訪 興安盟

巨人網絡通訊聲明:本文標題《解決tensorflow模型壓縮的問題_踩坑無數,總算搞定》,本文關鍵詞  解決,tensorflow,模型,壓縮,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《解決tensorflow模型壓縮的問題_踩坑無數,總算搞定》相關的同類信息!
  • 本頁收集關于解決tensorflow模型壓縮的問題_踩坑無數,總算搞定的相關信息資訊供網民參考!
  • 企业400电话

    智能AI客服机器人
    15000

    在线订购

    合计11份范本:公司章程+合伙协议+出资协议+合作协议+股权转让协议+增资扩股协议+股权激励+股东会决议+董事会决议

    推薦文章
    主站蜘蛛池模板: 锦州市| 澎湖县| 始兴县| 公主岭市| 枣阳市| 东山县| 郴州市| 色达县| 兴仁县| 墨竹工卡县| 招远市| 阜宁县| 化州市| 乌海市| 汶川县| 通化县| 五莲县| 新巴尔虎左旗| 通江县| 萨嘎县| 宁化县| 遂宁市| 乌兰察布市| 龙门县| 胶南市| 长沙市| 新巴尔虎右旗| 宁远县| 汝阳县| 馆陶县| 榆中县| 重庆市| 双牌县| 萨迦县| 正安县| 南郑县| 会宁县| 吉安市| 宁德市| 中西区| 景泰县|