小嘉欣的最近发布

Flume-Hbase-Sink针对不同版本flume与HBase的适配研究与经验总结

导语：本文细致而全面地讲解使用flume输出数据到HBase的三种不同Flume-Hbase-Sink之间的差异性，以及技术细节。并且透彻而全面地总结了不同版本flume和HBase之间的兼容性问题。为了更加详细说明三种不同hbasesink的差异性，本文在附录附上详细的源码解读。一、Flume的HBaseSinks详细介绍Flume有两大类HBasesinks：HBaseSink(org.apa

Hbase

Flume

对接

转载 2019-09-19 11:33:12 1362 阅读

HBase 优化，columnFamily和qualifierColumn的设计原则

一、把一个传统的关系型数据库中的数据映射到hbase，从性能的角度如何优化ColumnFamily和qualifierColumn.二、两个比较极端的情况，（1）关系型数据库中的每一列对应一个columnFamily，（2）关系型数据库中一张表对应一个columnFamily。三、从读的角度分析性能（1）如果columnFamily越多，读取一个cell的速度优势是比较明显的，因为找到这个colu

columnFamily

Hbase优化

Columnqualifier

转载 2019-09-10 14:48:11 1957 阅读 1点赞

简单理解viterbi算法

简介：viterbi算法其实就是多步骤每步多选择模型的最优选择问题，其在每一步的所有选择都保存了前续所有步骤到当前步骤当前选择的最小总代价（或者最大价值）以及当前代价的情况下前继步骤的选择。依次计算完所有步骤后，通过回溯的方法找到最优选择路径。符合这个模型的都可以用viterbi算法解决。用以下例子加以说明：1.题目背景：从前有个村儿，村里的人的身体情况只有两种可能：健康或者发烧。假设这个村儿的人

viterbi

HMM

隐马尔可夫模型；Python

转载 2019-08-29 11:11:45 1563 阅读

线性代数基础

【转载】线性代数基础知识原文地址：http://blog.csdn.net/longxinchen_ml/article/details/51629328作者：ZicoKolter(补充：ChuongDo)时间：2016年6月翻译：@MOLLY（mollyecla@gmail.com）@OWEN（owenj1989@126.com）校正：@寒小阳(hanxiaoyang.ml@gmail.com)

线性代数

转载 2019-06-12 17:52:10 1162 阅读

Python实现链表

单链表：#-*-coding:utf-8-*-classNode(object):"""节点"""def__init__(self,elem):self.elem=elemself.next=NoneclassSingleLinkList(object):"""单链表"""#头结点def__init__(self,node=None):self._head=nodedefis_empty(self

Python

数据结构

链表

原创 2019-05-16 15:54:04 533 阅读

Python实现栈和队列

栈：#-*-coding:utf-8-*-classStack(object):def__init__(self):self.__list=[]defpush(self,item):returnself.__list.append(item)defpop(self):returnself.__list.pop()defpeek(self):"""返回栈顶元素"""ifself.__list:ret

Python

栈

队列

数据结构

原创 2019-05-16 15:42:44 586 阅读

Python实现二分查找

搜索常见算法：顺序查找，二分法查找，哈希查找，下面是二分查找的实现方式#coding:utf-8#二分查找的前提：只能对有序列进行查找defbinary_search(alist,item):"""二分查找---递归实现"""n=len(alist)ifn>0:mid=n//2ifitem==alist[mid]:returnTrueelifitem<alist[mid]:return

Python

二分查找

数据结构

原创 2019-05-16 09:43:46 1760 阅读

Python实现二叉树

#-*-codding:utf-8-*-classNode(object):"""节点"""def__init__(self,item):self.elem=itemself.lchild=Noneself.rchild=NoneclassTree(object):"""二叉树"""def__init__(self):self.root=Nonedefadd(self,item):node=Nod

Python

二叉树

数据结构

原创 2019-05-16 09:32:59 2761 阅读

Python实现排序算法2

4.希尔排序#-*-coding:utf-8-*-defshell_sort(alist):"""希尔排序"""n=len(alist)gap=n//2whilegap>=1:forjinrange(gap,n):i=jwhilei>0:ifalist[i]<alist[i-gap]:alist[i],alist[i-gap]=alist[i-gap],alist[i]i-=ga

Python

排序算法

原创 2019-05-15 12:39:39 416 阅读

Python实现排序算法1

排序算法有很多种，下面列举几种：1.冒泡排序2.选择排序3.插入排序4.希尔排序5.快速排序6.归并排序1.冒泡排序#-*-coding:utf-8-*-defbubble_sort(alist):"""冒泡排序"""forjinrange(len(alist)-1):foriinrange(0,len(alist)-1-j):ifalist[i]>alist[i+1]:alist[i],a

Python

排序算法

原创 2019-05-15 12:35:41 293 阅读

Kafka offset

引言Kafka中的Message是以topic为基本单位组织的，不同的topic之间是相互独立的。每个topic又可以分成几个不同的partition(每个topic有几个partition是在创建topic时指定的)，每个partition存储一部分Message。借用官方的一张图，可以直观地看到topic和partition的关系。AnatomyofaTopicpartition是以文件的形式

Kafka

转载 2019-05-09 15:59:47 2384 阅读

python a += b 与 a = a + b的区别

a=[1,2,3]b=aprint(a,b)print(id(a),id(b))#[1,2,3][1,2,3]#23463016415442346301641544b+=[4,5]print(a,b)print(id(a),id(b))#[1,2,3,4,5][1,2,3,4,5]#23463016415442346301641544b=b+[6,7]print(a,b)print(id(a),i

数据操作

转载 2019-05-09 11:21:57 940 阅读

17.单例开发

单例开发#-*-coding:utf-8-*-__author__='xiaojiaxin'__file_name__='单例开发'classfoo:def__init__(self,name,age):self.name=nameself.age=agedefshow(self):print(self.name,self.age)obj1=foo("jiaixn",72)#obj是food的对象

Python

单例开发

51cto

原创 2018-04-13 16:48:52 470 阅读 1点赞

16.2反射实例

反射实例r1模块__author__='xiaojiaxin'__file_name__='r1'deff1():return"首页"deff2():return"新闻"deff3():return"关注"r2模块#-*-coding:utf-8-*-__author__='xiaojiaxin'__file_name__='r2'importr1whileTrue:shu=input("请输入U

Python

反射

反射实例

原创 2018-04-13 15:38:10 526 阅读 1点赞

16.1反射

反射反射就是通过字符串的形式，导入模块；通过字符串的形式，去模块寻找指定函数，并执行。利用字符串的形式去对象（模块）中操作（查找/获取/删除/添加）成员，一种基于字符串的事件驱动。#-*-coding:utf-8-*-#反射在其他语言中执行效率比较低，在Python中执行效率高classfoo:def__init__(self,name,age):self.name=nameself.age=ag

Python

反射

51cto

原创 2018-04-13 15:27:30 500 阅读 2点赞

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客