Thrift之学习笔记

本文主要是对Thrift学习的一些总结,主要讲述了Thrift的开发、基本数据类型服务类型的介绍,然后会通过两个例子来学习如何使用Thrift进行开发,同时会介绍Thrift在大数据框架方面的应用。

阅读更多

从Jekyll转向Hexo

之前的博客,是使用Jekyll搭建的,因为学过一些ruby,也会一些ruby on rails,所以对Jekyll有天生的好感,看不上wordpress、hexo之类的。不过后来当我看到了hexo的next主题时,被它的简洁所吸引,因此决定转向hexo,本文记录使用hexo构建博客的方法(PS;我只是一个搬运工,针对Linux用户而言)。

阅读更多

排序算法总结

排序算法是算法中基础的部分,也是面试中经常被问到的地方。因此,根据对《算法》和《算法导论》关于这部分的学习,做一下总结,以后再遇到排序方面的问题就可以直接看一下博文就行了(文中算法用java实现)。

阅读更多

Java工程师成神之路【转】

原文转自Java工程师成神之路,并对原文根据自己的学习及经验做了一些修改。

阅读更多

Kafka之消息传输

问题研究:

阅读更多

Kafka之数据存储

本文主要讲述以下两部分内容:

阅读更多

MapReduce之Shuffle过程详述

写在前面

MapReduce作为Hadoop的编程框架,对于大数据开发或者想要接触大数据开发的开发者来说,是必须要掌握的,它是一种经典大数据计算框架,现在有很多开源项目的内部实现都会直接或间接地借鉴了MR过程的实现。我在经过了一些hadoop项目的开发,然后前几天又系统地学习MapReduc内部实现过程,尤其是学习中间的Shuffle过程之后,准备对这一块做一下总结,希望这篇文章能给需要的人带来一些帮助(文中Shuffle的分析还是以Hadoop1.0为例,这个跟2.0的区别并不是很大)。

阅读更多

Travel to Nanjing | 元旦南京之旅

这篇文章是我2016年的第一篇博客,之前本来想着新年的开篇应该写一篇掉炸天的技术博客,最后,想了想,还是准备写篇旅行博客吧,因为这次南京游玩不仅仅是旅行。

阅读更多

关于Kafka学习的一些资料

kafka一些重要博客参考

kafka设计部分的文档:

阅读更多

Kafka监控软件介绍

KafkaOffsetMonitor

下载安装

    阅读更多

    Kafka程序设计之Producer

    本文主要是介绍一下kafka基于Producer API的程序设计,使用的kafka版本为2.10-0.8.1.1

    阅读更多

    Kafka的简单介绍

    这篇文章主要是简单地把Kafka的背景,基础知识和应用场景介绍一下,算是一篇入门的文章。

    阅读更多

    Kafka集群的安装与配置

    使用过kafka的童鞋应该都知道,kafka的安装是比较简单的,尤其跟hadoop,storm这类相比。本文就主要介绍kafka集群的安装和配置方法。

    阅读更多

    收藏的一些不错的网站

    这篇主要是整理一下自己书签里收藏一些个人感觉不错的网站,它们大都是一些比较小众的网站,因为是技术出身,推荐的很大一部分网站可能都是偏技术类的,这点希望大家能够理解~。

    阅读更多

    Java的几个基本类型之间的相互转换

    之前在写java程序的时候,经常会遇到很多的需要需要转换基础数据类型的情况,然后我就一直去记录这些情况,今天做了一下总结,当然转换的方法肯定不止我写的这些,有的我可能只会写其中的一种,以后再遇到其他的情况的话,我会慢慢来补充,希望这篇文章会对大家能有所帮助。

    阅读更多

    Java关键字之final和static

    本篇文章主要对java中经常使用finalstatic两个关键字的用法做一下总结,主要参考了《Java编程思想》和网上的一些博客。

    阅读更多

    Maven之仓库配置

    徐晓斌的《Maven实战》,实在是一本很不错的书,本文也是在我读过这本书的仓库一章后,根据自己的经验,做的一个总结。

    阅读更多

    Maven之依赖

    最近一年做项目时,一直在与Maven打交道,在网上也看了很多的博客,也看了《Maven实战》这本书,感觉受益匪浅,但是过一段时间很多东西也会忘记,所以就想根据这本书上看到的,还有自己的经验,写几篇Maven的博客来梳理一下核心点。

    阅读更多

    Travel to Qinghai Lake | 青海湖骑行之旅

    今年的青海湖之行给我留下了很美好的回忆,骑行的过程确实是很艰辛,但我们每一个人都按照原计划到达了终点。

    阅读更多

    Storm之配置文件

    Storm的配置文件一般存放在$STORM_HOME/conf下,通常名为storm.yaml,它符合yaml格式要求。Storm的配置参数对任务的稳定运行以及吞吐率至关重要,这里介绍一下storm常见的配置项参数。

    阅读更多