自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

原创 大数据框架图谱(总览)

前言 加入大数据开发加起来也差不多快1年多的时间了。最近的时间比较空余,正好把所有的大数据开源框架都总结一下。 Hadoop & Hive & Pig & HBase...

2018-03-23 15:11:16 7517 0

转载 Linux 删除乱码文件

Question 不知道大家有没有碰到这种文件,因为是乱码,文件无法删除,这时我们就可以考虑用下面的命令进行删除文件或目录 ls -i //列出文件节点 find ./ -inum XXX(节点号) -print -exec rm -rf {} \; //删除节点号文件 find ....

2018-03-27 21:32:45 435 0

原创 Linux 修改DNS配置

Question 工作遇到一个问题,需要修改DNS解析。 Solution 更改/etc/resolv.conf文件,更改成如下配置: nameserver 180.76.76.76 nameserver 114.114.114.114 ### Google nameserv...

2018-03-27 21:30:30 12617 0

原创 技术网站 & 博客

前言 网上技术多如牛毛,但是真正的技术人屈指可数。为此,收集些技术网站&博客,扩充自己的知识水平和范围。 工具类网站 findjar http://www.findjar.com/ 网站 365: http://www.365mini.com * ...

2018-03-27 21:25:49 191 0

原创 Tomcat 调节缓存与内存参数

Question Bug1: Tomcat内存大小不足。 Bug2: cache because there was insufficient free space available after evicting expired cache entries - consider incre...

2018-03-27 21:12:33 3051 0

原创 Tomcat8访问管理页面localhost出现:403 Access Denied

Question 访问Tomcat的192.168.100.90:8080/manager/status页面出现了403页面,页面提示如下所示。 401 Unauthorized You are not authorized to view this page. If you have n...

2018-03-27 09:44:28 297 0

原创 Redis 面试题(持续更新)

前言 看了一圈,发现Redis的面试题主要问的是如下几块: 原理 用处(缓存/队列 包括Pub、Sub/计数器/排行榜等) 基本操作与数据类型 消息队列 且与其它消息队列的区别 主从备份 宕机如何处理 持久化及原理(原生持久化 & 结合Mysql等数据库持久化) 是否...

2018-03-25 20:50:31 12095 1

原创 Redis 持久化

前言 Redis主要作为一个内存管理器,是否具有持久话策略?答案是肯定的。 Redis的持久化策略主要包括2种: 全量策略 bgsave 增量策略 aof 全量策略 关于持久化策略的文件主要保存在redis.conf文件内,其主要配置信息如下所示: #########...

2018-03-25 20:16:48 242 0

原创 Redis集群模式之分布式集群模式

前言 Redis集群模式主要有2种: 主从集群 分布式集群。 前者主要是为了高可用或是读写分离,后者为了更好的存储数据,负载均衡。 本文主要讲解主从集群。本章主要讲解后一半部分,Redis集群。 与本文相关的代码与配置文件都已经上传至github上: 地址: https://git...

2018-03-23 22:01:11 9120 0

原创 Redis集群之主从集群模式(哨兵模式Sentinel)

前言 Redis集群模式主要有2种: 主从集群 分布式集群。 前者主要是为了高可用或是读写分离,后者为了更好的存储数据,负载均衡。 本文主要讲解主从集群。 与本文相关的代码与配置文件都已经上传至github上: 地址: https://github.com/SeanYanxml...

2018-03-23 21:33:28 1745 0

转载 Redis Client 之 Jedis

与本文相关的代码与配置文件都已经上传至github上: 地址: https://github.com/SeanYanxml/bigdata 一、常用数据类型简介: redis常用五种数据类型:string,hash,list,set,zset(sorted set). 1.String类型...

2018-03-23 20:56:54 743 0

原创 Redis基本命令总结(三)

Redis基本命令总结(三) 本文主要包括如下几个部分: * PING命令 * INFO命令 * CONFIG命令 * 5种基本操作类型操作 * 发布&订阅 * 事务 与本文相关的代码与配置文件都已经上传至github上: 地址: https://github.c...

2018-03-23 00:32:10 156 0

原创 Redis 基本命令总结(二)

Redis基本命令总结(二) 本文主要包括如下几个部分: * PING命令 * INFO命令 * CONFIG命令 * 5种基本操作类型操作 * 发布&订阅 * 事务 与本文相关的代码与配置文件都已经上传至github上: 地址: https://github.c...

2018-03-23 00:27:01 164 0

原创 Redis 基本命令总结(一)

Redis基本命令总结 本文主要包括如下几个部分: * PING命令 * INFO命令 * CONFIG命令 * 5种基本操作类型操作 * 发布&订阅 * 事务 与本文相关的代码与配置文件都已经上传至github上: 地址: https://github.com/...

2018-03-23 00:09:36 686 0

原创 Redis & Redis Sentinel 基本使用

Redis & Redis-sentinel 基本使用 本文主要介绍如下几点内容: Redis基本配置 Redis Sentinel基本配置 Redis Client客户端基本内容 Redis Sentinel客户端基本内容 与本文相关的代码与配置文件都已经上传至gith...

2018-03-22 23:14:01 2698 1

原创 The project cannot be built until build path errors are resolved

Question Eclipse 内报如下的错误: The project cannot be built until build path errors are resolved Solution 还有其他的错误,把其他的错误解决后。mvn clean / clean project...

2018-03-15 00:04:43 124 0

原创 HTML如何让文本两端对齐

Question 之前看一个外文网站,貌似都不是两端对齐,我想把他转换为PDF文件下载下来。不是两端对齐看起来太难受了。找了个方法。 Solution <p style="text-align:justify; text-justify:inter-ideogra...

2018-03-15 00:00:59 17350 1

原创 Maven 解决依赖Jar包冲突

Question 之前引用程序的时候,发现有的Jar包版本不是我所需要的版本。在依赖Jar 包外面又引用了一遍,导致Jar包依赖错误。 Solution 修改pom.xml文件,去除不需要jar包,引入需要的jar。保证同一个jar包直邮一个版本的jar包。 例如(去除scala2.1...

2018-03-14 23:56:45 286 0

原创 Kafka SASL配置 & Demo测试

引言 接到一个任务,调查一下Kafka的权限机制。捣鼓了2天,终于弄出来了。期间走了不少的坑。还有一堆不靠谱的家伙的博客。 Kafka版本 1.0.0 Scala 2.11 ZooKeeper 2.4.10 根据Kafka的官网文档可知,Kafka的权限认证主要有...

2018-03-14 23:46:32 11001 58

原创 Kafka Provider & Consumer Demo

前言 很久没有深入调研Kafka了,最近开始研究起来。最好能够弄一份源码,满满细读。 本文主要讲解如何写一个Kafka的官方样例。 PS: 哎,Kafka迭代了好几个版本了,周围的人也是物是人非。 Demo 本文的Demo主要包括如下的几个部分: Maven 依赖 Provide...

2018-03-14 22:52:35 663 0

转载 Java 字符串转码

正文 Java中字符串转码,根据实际运用的环境有以下三种方式 使用Java.lang.String这是最常用的方法,先用对应编码获取字节,然后重新构造新编码,示例代码如下: String s = "清山"; byte[] b = s.getBytes("...

2018-03-13 22:26:33 13338 0

原创 Linux ln命令使用技巧

Question 昨天使用ln命令,意外的有点错误。错误信息如下: 使用ln命令的时候发现创建的快捷方式根本不能访问。经调查发现,是使用姿势的问题。错误信息如下: localhost:Kafka Sean$ ln -s kafka_2.11-1.0.0 kafka localhost:Kaf...

2018-03-13 09:13:44 196 0

原创 Virtual Box 快捷键

常用快捷键 control+alt : 切换虚拟机模式

2018-03-08 11:17:01 369 0

转载 咸鱼网站搜索接口

Question 咸鱼网页版搜索连接不见了,查出来这个接口。 https://s.2.taobao.com/list/list.htm?q=搜索内容&search_type=item&_input_charset=utf8 当然还有其他的接口: http...

2018-03-07 22:49:11 9631 3

原创 ipc.Client: Retrying connect to server: xxx:9000. Already tried 0 time(s);解决方法

Questions ipc.Client: Retrying connect to server: h1/192.168.1.61:9000. Already tried 0 time(s); 2018-03-05 15:57:55,929 INFO org.apache.hadoop.i...

2018-03-07 00:59:11 1483 0

原创 Jar包内加载FreeMarker模版

Questions Loading freemarker templates folder inside .jar Solution Configuration cfg; private Template template; { cfg=new Conf...

2018-03-07 00:49:54 4506 4

原创 org.springframework.beans.factory.NoUniqueBeanDefinitionException (一个类2个实例对象)

Questions Caused by: org.springframework.beans.factory.NoUniqueBeanDefinitionException: No qualifying bean of type 'freemarker.template.Confi...

2018-03-07 00:40:47 2063 0

原创 Does not contain a valid host:port authority: xx-_xx:9000

Questions 安装Hadoop时候,出现如下异常: WARN org.apache.hadoop.hdfs.server.datanode.DataNode: Problem connecting to server: xxx/xxx 或者出现 [1]Hadoop格式化HDFS报...

2018-03-07 00:30:54 1403 0

原创 It looks like you are trying to access MongoDB over HTTP on the native driver port.

Questions It looks like you are trying to access MongoDB over HTTP on the native driver port. Answer MongoDB的HTTP服务没有开启,需要开启。 Reference [1]....

2018-03-07 00:17:02 11904 12

原创 Linux 网络相关配置

记录下不同系统的网卡及主机名称的配置文件的位置。 Redis6 # hostname /etc/sysconfig/network # hosts /etc/hosts # ip /etc/sysconfig/network-script/ifcfg-eth0 R...

2018-03-06 23:58:04 98 0

原创 Linux 新建用户 及权限相关操作

基础命令操作 具体操作如下所示: groupadd testgroup useradd -d /usr/test -g testgroup -m testuser passwd testuser # 查询用户所在组 # groups cpic # 删除用户 # userdel cpic...

2018-03-05 09:24:50 192 0

提示
确定要删除当前文章?
取消 删除