Şimdi bir modeli eğitmek ve ihraç etmek için TensorFlow'u kullandık. Çıkarım hizmetini, bu modelle, tensorflow/serving
'un nasıl yaptığı gibi uygulayabiliriz.Çıkarım servisinde tf.Session kullanırken thread güvenli midir?
tf.Session
nesnesinin thread-safe olup olmadığına dair bir sorum var. Bu doğruysa, başlatıldıktan sonra nesneyi başlatabilir ve eşzamanlı istekleri işlemek için singleton nesnesini kullanabiliriz.
Harika. Çok teşekkürler. Bunu belgeye eklemek gerekli mi? TensorFlow kullanan herhangi biri, modelleri için çıkarım servisini uygulayabilir ve bunu doğru şekilde yapmak önemlidir. – tobe