java开发中是否应该频繁的使用log4j记录日志？

不是的。
记录日志是个很好的习惯。可以很好的监视程序运行状态并发现bug的产生。
但是日志是要看的。。你一行写一个。不仅影响程序速率。并且生成的日志自己看起来也麻烦。
我的习惯是。
通用的记录方法是每个函数的开头结尾分别加入
log.debug("程序名 begin")
log.debug("程序名 end")

错误处理以及其他一些重要的地方特殊处理。就这样了。
没什么规定。自己把握把。