卫渐行

你们现在解决了吗？

Hive bitmap udf

背景 在hive中使用Roaring64Bitmap实现精确去重功能 主要目的：1.提升 hive 中精确去重性能，代替hive 中的 count(distinct uuid...

菜鸟驿站助手

3487 4 3

卫渐行 ·

spark sql 使用这些udf会报错：Caused by: java.lang.ClassNotFoundException: org.roaringbitmap.ArraysShim，是什么原因呀

suibf 评论自Hive bitmap udf

卫渐行

Q&A Q：如图。 A：当然是自带的。其实RoaringBitmap正是ClickHouse位图的底层实现（笑 RoaringBitmap的预备知识请见这里。 在CH中产生位...

卫渐行

自身问题 一. 对自己写的代码不自信。二.遇到问题总是想着很难，自己解决不了。三.遇到问题喜欢退缩，不喜欢花时间。四.花费时间周期太长，要加快进度五.没有头绪 代码问题 a...

卫渐行

@_大叔_

hive导入到clickhouse的几种方式总结

在开发过程中，需要从HDFS中导入数据到clickhouse中，探索了几种方式，以及一些坑与大家分享； Waterdrop 参考大神的文章，实现快速的安装，和相关配置如何快速...

卫渐行

17478 2 4 1

卫渐行

应用对接的方式包含： mysql mongodb http 三种方式都可以实现对于预测器的透出；当然我们常见的都是http或者mysql的方式； 下面介绍mysql的方式实现...

卫渐行

最近在看阿里开源RPC框架Dubbo的源码，顺带梳理了一下其中用到的设计模式。下面将逐个列举其中的设计模式，并根据自己的理解分析这样设计的原因和优劣。 责任链模式 责任链模式...

卫渐行

一定要自己画图

MVC设计模式

MVC是常用的设计模式之一，将程序分成三个层次分别是：视图模型层（V），控制器层（C），数据模型层（M） 好处： 1.程序结构灵活，清晰2.描述各个对象之间的通信方式3.降低...

思考z

398 1 1

卫渐行

非常快的两个星期过去了，自己的状态还没有找回来，似乎在这两个星期停止了学习的脚步一样，感觉自己是一个遇到难就想逃避的一个人，明明知道解决这个难题会有非常大的进步，面对问题敢于...

卫渐行

国庆回来状态挺好的意识到了自己还要学习的非常多，时间也不会有多少了，Java基础没有学完Mysql数据库上课也听不懂了，课后没有花时间去看，所以在上个星期一有时间就会去图书馆...

卫渐行

国庆在家几乎就是没有心去学习，自己的打算是明天都学习，想着是每天都废寝忘食，想的好，但是没有一天是做到了的，这几天也是意识到时间实在是不多了，一刻也不能放纵自己，放松了，应该...

卫渐行

知道和做到是世界上最遥远的距离，每个人的脑子都有自己的打算，都有自己非常好的安排，非常好的想法，但是去仅仅是头脑上的知道，真正的做出来需要代价，知道要好好学习，行出来的不一样...

卫渐行

一个暑假转眼间就过去了，在放假前还在考虑暑假要去干嘛，最后的选择还是挺喜乐的，先去培训了18天，这18天的收获还是挺大的，手机上交了，脱离了世界，早上每天都是6点起床，8点上...

卫渐行

Nessie可以管理像git 分支，合并数据源等一些特性； 受git的版本管理启发 跨表事务和可见性 支持hive,spark,AWS Athena,dremio，管理其数据...