Output graph pb

[JRMeyer]

>>> yasine.nifa
[June 3, 2019, 9:49am]

Hey

I wan to know if I can generate the output_graph.pb file every epoch

Thx
![:slight_smile:](

[This is an archived TTS discussion thread from discourse.mozilla.org/t/output-graph-pb]

[JRMeyer]

>>> lissyx
[June 3, 2019, 12:19pm]

Export only happens at the end of the process. Why would you want to do
that ?

[Archived Post]

[JRMeyer]

>>> yasine.nifa
[June 3, 2019, 12:31pm]

J'ai lancé l'entraînement du modèle avec 3000 epochs en utilisant le GPU
mais malheureusement mon PC s'est éteint au bout du deuxième jour de
l'entrainement (J'ai obtenu qlq checkpoint mais pas le modèle (.pb)). Je
sais pas vraiment la raison mais Je crois parce qu'il s'est échauffé. slash
Je voudrai relancer l'entrainement mais j'ai peur de finir par rien
obtenir, du coup j'avais cette idée de sauvegarder le modèle et de
générer le fichier .pb après chaque (n epochs)

[Archived Post]

[JRMeyer]

>>> lissyx
[June 3, 2019, 12:35pm]

Can we keep english
here ? French can be used in this other sub-forum, if you need
assistance: https://discourse.mozilla.org/c/voice/fr

[Archived Post]

[JRMeyer]

>>> lissyx
[June 3, 2019, 12:35pm]



> Je voudrai relancer l'entrainement mais j'ai peur de finir par rien
> obtenir, du coup j'avais cette idée de sauvegarder le modèle et de
> générer le fichier .pb après chaque (n epochs)

So, you don't have to perform an export at every step if you fear about
loosing data: checkpoints are here to keep track and restart from a good
point.

[Archived Post]

[JRMeyer]

>>> lissyx
[June 3, 2019, 12:37pm]



> malheureusement mon PC s'est éteint au bout du deuxième jour de
> l'entrainement (J'ai obtenu qlq checkpoint mais pas le modèle (.pb)).
> Je sais pas vraiment la raison mais Je crois parce qu'il s'est
> échauffé.

Did it abruptly shutdown ? It could be a mis-behaving PSU or just too
small to drive your system. Can you share details on your hardware setup
?

[Archived Post]

[JRMeyer]

>>> yasine.nifa
[June 3, 2019, 12:38pm]

okey I did not know that slash
thx
![:slight_smile:](

[Archived Post]

[JRMeyer]

>>> yasine.nifa
[June 3, 2019, 12:41pm]

So I just have to relance the execution.

[Archived Post]

[JRMeyer]

>>> yasine.nifa
[June 3, 2019, 12:47pm]

I am not sure if it abruptly shutdown, because I was sleeping. slash
ubuntu 18.04.2 LTS slash
Memory : 15.6 Gio slash
Processor : Intel® Core™ i7-7700 CPU 3.60GHz × 8 slash
Graphic card : GeForce GTX 1070/PCIe/SSE2 slash
operating system : 64-bits slash
Disk : 783.5 Go

[Archived Post]

[JRMeyer]

>>> lissyx
[June 3, 2019, 12:48pm]



> Processor : Intel® Core™ i7-7700 CPU 3.60GHz × 8 slash
> Graphic card : GeForce GTX 1070/PCIe/SSE2

What's your PSU ? How is your GPU plugged with PCIe power cables ?

[Archived Post]