-
编辑 删除
impala invalidate metadata 问题
背景：CDH集群运行几天后主节点会报磁盘根目录空间不足警告，上机器看一下发现df和du结果差异巨大，猜测有些文件被删除但有进程并未释放文件句柄。排查：执行 lsof |grep "(deleted)"不出所料，发现10000多个以下文件：catalogd 18019 impala 252r ...
-
编辑 删除
scala隐式转换优先级问题
隐式转换编译器会优先选择方法的参数作为转换对象，验证如下：object rct { implicit def intToBook(num:Int) = new Book(num) implicit def bookToInt(book:Book) = book.number class Book(val number:Int)...
-
编辑 删除
scala 调用 java 方法参数匹配问题
scala调用java的FastJson时发生了一个方法参数匹配问题：例子：p.p1 {margin: 0.0px 0.0px 0.0px 0.0px; font: 11.0px Monaco}span.s1 {color: #931a68}import com.alibaba.fastjson.JSONvar map:scala.collection.mutable.HashMap[String,An...
-
编辑 删除
hdp zeppelin 数据可视化分析配置
hdp版本：执行：hdp-select status hadoop-client | sed 's/hadoop-client - \(.*\)/\1/'2.4.0.0-169zeppelin安装（摘录官网）：(Optional) Installing Zeppelin ManuallyThe Zeppelin Technical Preview is available as an HDP package compiled against Spark 1.6.To install the Zeppelin Technical Pre...
