Caffe-Miscoroft无训练日志解决方法

冷不防 2022-06-11 04:57 230阅读 0赞

Caffe的训练日志就是我们在命令窗口中看到的训练时打印出来的信息，我们可以利用这些信息画训练时loss

accruacy图，至于怎么利用这些信息画出这两个图是下一篇将要讲述的问题。我们先来看看这些保存在什么地方。如果你是使用的Caffe-Windows版本是happynear大神编译的老版本，那你应该会在bin文件下发现一个log文件夹，里面保存的就是我们需要的训练文件，文件名上有时间，可以很方便的找到我们想要的日志。

然而，很不幸的Caffe官方提供的Windows版本，即[https://github.com/BVLC/caffe/tree/windows][https_github.com_BVLC_caffe_tree_windows]，找不到这个文件夹了（我找了很久都没有找到）。今天偶然间看了一篇大神的博客，发现他也遇到了和我同样的问题，大神博客地址如下，里面还有Ubuntu下的解决方案（[http://blog.csdn.net/lishanlu136/article/details/51491301][http_blog.csdn.net_lishanlu136_article_details_51491301]）。这篇博客给了我很大的灵感，我比较了新旧版本的Caffe，原来问题都出来src文件下的commom.cpp文件，新版本Caffe-Windows不知出于何种目的，将生成日志文件的函数去掉了，因此我们也就找不到日志文件了。既然问题的根源找到了，下面就说说解决方法，其实很简单，照葫芦画瓢。

使用VS2013打开Caffe，找到src/common.cpp文件，添加如下代码：

1、添加几个头文件

**\[cpp\]** [view plain][] [copy][view plain]

1.  \#include <boost/date\_time.hpp>
2.  \#include <process.h>
3.  \#include <direct.h>

2、添加一个生成日志的子函数

**\[cpp\]** [view plain][] [copy][view plain]

1.  **void** initGlog() \{ 
2.   FLAGS\_log\_dir = ".\\\\log\\\\";//存放日志文件的文件夹路径，我们可以自己指定
3.   \_mkdir(FLAGS\_log\_dir.c\_str()); 
4.   std::string LOG\_INFO\_FILE; 
5.   std::string LOG\_WARNING\_FILE; 
6.   std::string LOG\_ERROR\_FILE; 
7.   std::string LOG\_FATAL\_FILE; 
8.   std::string now\_time = boost::posix\_time::to\_iso\_extended\_string(boost::posix\_time::second\_clock::local\_time()); 
9.   now\_time\[13\] = '-'; 
10.  now\_time\[16\] = '-'; 
11.  LOG\_INFO\_FILE = FLAGS\_log\_dir + "INFO" \+ now\_time + ".txt"; 
12.  google::SetLogDestination(google::GLOG\_INFO, LOG\_INFO\_FILE.c\_str()); 
13.  LOG\_WARNING\_FILE = FLAGS\_log\_dir + "WARNING" \+ now\_time + ".txt"; 
14.  google::SetLogDestination(google::GLOG\_WARNING, LOG\_WARNING\_FILE.c\_str()); 
15.  LOG\_ERROR\_FILE = FLAGS\_log\_dir + "ERROR" \+ now\_time + ".txt"; 
16.  google::SetLogDestination(google::GLOG\_ERROR, LOG\_ERROR\_FILE.c\_str()); 
17.  LOG\_FATAL\_FILE = FLAGS\_log\_dir + "FATAL" \+ now\_time + ".txt"; 
18.  google::SetLogDestination(google::GLOG\_FATAL, LOG\_FATAL\_FILE.c\_str()); 
19. \}

需要注意的是这个子函数一定要定义在void GlobalInit(int\* pargc, char\*\*\* pargv)之前，因为Globallnit函数要调用initGlob（）子函数。

3、在void GlobalInit(int\* pargc, char\*\*\* pargv)函数中调用2中定义的子函数

**\[cpp\]** [view plain][] [copy][view plain]

1.  **void** GlobalInit(**int**\* pargc, **char**\*\*\* pargv) \{ 
2.  // Google flags.
3.   ::gflags::ParseCommandLineFlags(pargc, pargv, **true**); 
4.  // Provide a backtrace on segfault.
5.  //::google::InstallFailureSignalHandler();
6.  // Google logging.
7.  /\*\*\*\*\*\*\*添加到下面位置\*\*\*\*\*\*\*\*\*/
8.   initGlog(); 
9.  /\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*/
10.  ::google::InitGoogleLogging(\*(pargv)\[0\]); 
11. \}

4、重新生成libcaffe

右击项目libcaffe->生成，等待就可以了。

5、重新生成caffe，这个很重要否则无法生效，我一开始就忘记这一步，所以没有成功。

右击项目caffe->生成，等待就OK！

6、分享两个很有用的连接

[Linux][]下训练日志重定向及画loss与accuracy曲线：[http://blog.csdn.net/fx409494616/article/details/53197209?ref=myread][http_blog.csdn.net_fx409494616_article_details_53197209_ref_myread]，这篇博客中的做法更加简洁

caffe中如何关闭命令行log输出：[http://blog.csdn.net/zhangla1220/article/details/50999072][http_blog.csdn.net_zhangla1220_article_details_50999072]，使用于工程。

一切搞定，赶紧去试试吧！

再次训练网络时，你会在Build\\x64\\Release下发现多出一个log文件夹，我们所要的训练日志就保存在里面了。至于如何利用这些日志文件，画loss曲线和accuracy曲线，下一篇再详细讲解。

[https_github.com_BVLC_caffe_tree_windows]: https://github.com/BVLC/caffe/tree/windows
[http_blog.csdn.net_lishanlu136_article_details_51491301]: http://blog.csdn.net/lishanlu136/article/details/51491301
[view plain]: http://blog.csdn.net/sunshine_in_moon/article/details/53529028#
[Linux]: http://lib.csdn.net/base/linux
[http_blog.csdn.net_fx409494616_article_details_53197209_ref_myread]: http://blog.csdn.net/fx409494616/article/details/53197209?ref=myread
[http_blog.csdn.net_zhangla1220_article_details_50999072]: http://blog.csdn.net/zhangla1220/article/details/50999072