Tensorflow:当我加载一个保存的模型并使用预测时,它给出了非常糟糕的结果。为什么? (我正在使用估算器 API)

标签 tensorflow tensorflow-serving tensorflow-estimator

我正在使用估算器 API 来训练对形状图像进行分类的 CNN。

我能够使用从 tfrecord 文件训练的自定义 input_fn() 成功训练 CNN。然后我可以使用 model.predict(predict_input_fn) 进行预测。几个时期后的准确度 >80%,然后当我在一些测试数据上使用 model.predict() 时。我也得到> 80%。所以这似乎工作正常。

我想保存模型,然后加载模型并使用它进行预测,因为这就是我的目标。所以基本上是推断。当我这样做并预测我的测试数据时,我得到了糟糕的结果。我已经从我的 input_fn() 中删除了所有预处理并重新训练。所以我在预测时基本上是在传递原始数据。问题仍然存在。我想知道为什么会这样,或者我是否做错了什么。感谢您提供任何见解。

我会链接相关代码 我的模型_fn

def model_fn(features, labels, mode, params):

    x = features['image_raw']  
    net = tf.reshape(x, [-1, 824, 463, num_channels])
    net = tf.layers.conv2d(inputs=net, name='layer_conv1',
                           filters=32, kernel_size=11, strides=4,
                           padding='same', activation=tf.nn.relu)
    net = tf.layers.conv2d(inputs=net, name='layer_conv2',
                           filters=32, kernel_size=11, strides=4,
                           padding='same', activation=tf.nn.relu)
    net = tf.layers.conv2d(inputs=net, name='layer_conv3',
                           filters=32, kernel_size=5, strides=2,
                           padding='same', activation=tf.nn.relu)
    net = tf.layers.max_pooling2d(inputs=net, pool_size=2, strides=2,padding='SAME')    
    net = tf.layers.conv2d(inputs=net, name='layer_conv4',
                           filters=32, kernel_size=3,
                           padding='same', activation=tf.nn.relu)
    net = tf.contrib.layers.flatten(net)
    net = tf.layers.dense(inputs=net, name='layer_fc1',
                          units=256, activation=tf.nn.relu)
    net = tf.nn.dropout(net, 0.5)
    net = tf.layers.dense(inputs=net, name='layer_fc_2',
                          units=num_classes)
    logits = net
    y_pred = tf.nn.softmax(logits=logits)
    y_pred_cls = tf.argmax(y_pred, axis=1)
    if mode == tf.estimator.ModeKeys.PREDICT:
        export_outputs = {'classes': tf.estimator.export.PredictOutput({"classes": y_pred_cls})}

        spec = tf.estimator.EstimatorSpec(mode=mode,predictions=y_pred_cls,export_outputs=export_outputs)
    else:

        cross_entropy = tf.nn.sparse_softmax_cross_entropy_with_logits(labels=labels,logits=logits)

        loss = tf.reduce_mean(cross_entropy)

        optimizer = tf.train.AdamOptimizer(learning_rate=0.001,beta1=0.9,beta2=0.999,epsilon=1e-8,name="Adam")

        train_op = optimizer.minimize(loss=loss, global_step=tf.train.get_global_step())

        metrics = {"accuracy": tf.metrics.accuracy(labels, y_pred_cls)}     
        # Wrap all of this in an EstimatorSpec.
        spec = tf.estimator.EstimatorSpec(
            mode=mode,
            loss=loss,
            train_op=train_op,
            eval_metric_ops=metrics
            )      
    return spec

我的服务功能:

def serving_input_receiver_fn(): 
  inputs = {"image_raw": tf.placeholder(shape=[824, 463], dtype=tf.float32)}
  return tf.estimator.export.ServingInputReceiver(inputs, inputs)

我如何保存训练好的模型:

export_dir = model.export_savedmodel(
    export_dir_base="./saved_model/",
    serving_input_receiver_fn=serving_input_receiver_fn,
    as_text=True) 

我如何根据保存的模型进行预测:

from tensorflow.contrib import predictor
predict_fn = predictor.from_saved_model('./saved_model/1518601120/')
a = np.ones(shape=(824,463),dtype=np.float32)    
image = Image.open((os.path.join(prediction_dir,subdir,file)))
image = np.array(image)
image=image.swapaxes(0,1)
a[:,:]=image[:,:,0]  #The input is an RGBa PNG. only 1 channel is populated #with data from our shape.
prediction = predict_fn({"image_raw": a})
predictions.append((prediction['classes'][0]))

最佳答案

事实证明,我向预测函数传递了一个交换了高度宽度的张量。这没关系,因为我的占位符是相同的形状。但是一旦张量进入我的 model_fn() ,它就会被 reshape 为一个大小 widthheight。使图像在通过模型之前被“挤压”。这导致了我遇到的糟糕预测结果。

关于Tensorflow:当我加载一个保存的模型并使用预测时,它给出了非常糟糕的结果。为什么? (我正在使用估算器 API),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/48787421/

相关文章:

tensorflow - 使用 BERT (TF 1.x) 保存的模型执行推理

tensorflow - tf.data.Dataset 是否支持生成字典结构?

python-2.7 - Tensorflow 无限期运行 "Running per image evaluation"

validation - 使用估算器时,将验证监视器替换为 tf.train.SessionRunHook

python - 难以格式化 tf.example 以向 Tensorflow 服务发出请求

Tensorflow 对象检测 API 在使用 tensorflow 服务时推理时间很慢

python - 无法弄清楚如何为我自己的数据集在 Keras 的 Conv2D 层中定义 input_shape

python - 一次获取 Tensorflow 中多个元素的索引

java - 从 Java 中的 Tensorflow 服务模型获取 Matrix 响应

python - 如何将序列化数据提供给 tf 保存的模型?