-
编辑 删除
maven报错：找不到符号
maven报错：找不到符号在一开始遇到maven问题时，网路上可以搜到的资料基本支持以下几种情况： 1.清理cache - 使用mvn clean命令清理 - 使用IDEA里面的Invalid Cache清理 2.编码格式不统一 - 在pom.xml中将compiler的编码格式设为UTF-8点击(此处)折叠或打...
-
编辑 删除
有幸参加上海专场Spark线下课程,谈谈感想
说说我的最初：????????对于学习大数据的的小伙们，大家学习一般都是淘宝5块几百G的视频和潜水各种技术群，很多时候并不能真正对自己有帮助，很难坚持下去。????????在去年的某天，上了若泽老师的一节大数据压缩公开课(其实是实战班的...
-
编辑 删除
谈谈我和大数据的情缘及入门
大数据入门
-
编辑 删除
2016年大数据80篇爆款文章：这一年你追过的那些技术
2016年即将过去，各位大数据的程序员们，是否觉得这一年都不断的追着新技术跑？这个大数据公众号是今年一月底创立的，一年过去，我们积累了不少好内容。回过头来我们看看这一年的脚印，这里我按照文章内容做了一次汇总，分为：流处理、机器学习、用户画像、数据驱动、Hadoop、Apache Spark、Apache Kylin、Druid、推荐系...
-
编辑 删除
参加“谛听金融大数据产品”的开发，赢得了IBM Spark全球大赛的中国大奖
项目可视化web:http://diting.tech/diting/视频与代码: http://diting.tech/diting/download_contact.html微信博文原处: http://mp.weixin.qq.com/s/ExfdB2ApLTfv6oYyxvH81g
-
编辑 删除
正式开通GitHub啦
主要近期想要做一些代码的项目的学习，所以开通GitHub,当然ItPub 博客我也会接着写，写的不好，希望大家海涵！地址:https://github.com/Hackeruncle
-
编辑 删除
泰为信息科技（上海）有限公司 基于E-MapReduce的考量与实践
1. 1.58元/小时起快速体验 Hadoop & Spark ，为你助力大数据计算???? ????? 阿里云EMR是基于 Hadoop 的生态环境来搭建，同时可以跟阿里云的对象存储服务OSS等云服务进行无缝数据交换，方便用户将数据在存储平台和计算平台之间进行输入输出，以满足不同业务类型的需要，所...
-
编辑 删除
将近2个多月没有写博客了，惰性还是咬牙废去吧。
????时间过得真快，从8月份下旬到10月份中旬，将近3个月没有写博客了，哎，有时在感叹自己的懒惰！！！不像刚开始学习大数据那么有劲头，天天做看视频和看牛人博客，搭建环境，做实验，写写过程和总结博客了。在这三个月里，主要做了几件事：1.参加IBM Spark比赛，我的职责：2.在新浪财经新闻，...
-
编辑 删除
ETL数据导入/导出工具 HData(支持JDBC、Hive、HDFS、HBase、Kafka等)
HData是一个异构的ETL数据导入/导出工具，致力于使用一个工具解决不同数据源（JDBC、Hive、HDFS、HBase、MongoDB、FTP、Http、CSV、Excel、Kafka等）之间数据交换的问题。HData在设计上同时参考了开源的Sqoop、DataX，却与之有不同的实现。HData采用“框架+插件”的结构，具有较好的扩展性，框架相当于数据缓冲区，插件则...
-
编辑 删除
线上应用故障排查之一：高memory占用
前一篇介绍了线上应用故障排查之一：高CPU占用，这篇主要分析高内存占用故障的排查。搞Java开发的，经常会碰到下面两种异常：1、java.lang.OutOfMemoryError: PermGen space2、java.lang.OutOfMemoryError: Java heap space要详细解释这两种异常，需要简单重提下Java内存模型。（友情提示：本博文章...
-
编辑 删除
线上应用故障排查之一：高CPU占用
以我们最近出现的一个实际故障为例，介绍怎么定位和解决这类问题。根据top命令，发现PID为28555的Java进程占用CPU高达200%，出现故障。通过ps aux | grep PID命令，可以进一步确定是tomcat进程出现了问题。但是，怎么定位到具体线程或者代码呢？首先显示线程列表:ps -mp pid -o THREAD,tid,time...
-
编辑 删除
转载|如何利用客户端在itpub发博客
今天无意中看到http://blog.itpub.net/25508077/viewspace-1067624/文章，之前还为这些问题烦恼而不太愿意更新博客的，觉得有必要收藏以以便今后查找方便。 不过发布后查看全文时提示如下错误： CException 属性 "RpcApplication.itpub_bbsdb" 未被定义. 错误，将文章内容图片去掉也是一样，不过可以登录博客后“编辑...
