-
-
你现在标注的区域依然是方框吧
目标检测Anchor-free分支：基于关键点的目标检测
目标检测领域最近有个较新的方向：基于关键点进行目标物体检测。该策略的代表算法为：CornerNet和CenterNet。由于本人工作特性，对网络的实时性要求比较高，因此多用Y...
-
数据抽取建设需求
基于大数据生态的业务优化是目前各行各业的发展趋势，但是面临着最为基础的问题就是来自各业务系统原始数据的融合、交换、集成问题。在数据融合中，数据的ETL，即数据抽取、转换、装载...
-
IDEA中进行Java程序打包jar在IDEA中写Java程序是十分便捷的，这里针对如何打包Java的jar包进行演示。由于使用Spark进行一些数据的融合工作，因此需要将程序打包成Jar然后提交到Spark环...
-
Springboot下的mongodb操作
Springboot中，本身JPA支持mongodb的，如MongoTemplate，但是需要其相关实体进行映射，如果文档嵌套较多，比较复杂的情况下，这种方式极其不实用，特别...
-
Mongodb安装和权限认证设置
安装 在Centos下安装Mongodb，直接下载相应的版本解压即可。如我使用的是mongodb-linux-x86_64-rhel62-4.2.0.tgz，使用一下命令解压...
-
Springboot在IDEA下的环境构建针对新的项目来说，可以参考Idea下新项目创建向导，这个比较简单，网络上资源也比较丰富。这里记录一下有代码，然后构建可运行的环境问题。遇到的场景就是一个svn或者git项目下...
-
IDEA下如何使用gitflow来进行项目版本控制gitflow真的是git的极简主义，用的实在是爽。在此，记录一下初次使用的经历，做一个笔记，可以方便查询，以及方便组里面的相关人员使用。 环境安装 1、idea首先要安装g...
-
Kettle和Sqoop的使用感触
近一个月来，主要针对数据仓库的数据融合进行研究工作。尝试使用kettle在hive和数据库之间进行导数据。 针对hive上的查询，kettle可以进行的很快，但是针对hive...
-
Hive表的动态分区和静态分区
在Hive中，分区通常是默认为静态分区的，就是在你插入表的时候需要指定partition(xxx='xxx')，这种在分区称为静态分析，我感觉在插入部分增量数据的时候是有效的...
-
Sqoop导入多个表
Sqoop导入单个表，可以直接指定表名称，使用sqoop import来导入，如 Sqoop导入所有表，则可使用sqoop import-all-tables来进行导入。 针...
-
写的不错哦，这个sqoop怎么导入多张表了一下子，一个一个导入有点费事啊。。。
Sqoop最佳实践
一、什么是Sqoop Sqoop是一个在结构化数据和Hadoop之间进行批量数据迁移的工具，结构化数据可以是Mysql、Oracle等RDBMS。Sqoop底层用MapRed...
-
Sqoop导入Oracle数据到Hive(记录两天的成果)
所用软件版本 ubuntu 16.04.6 LTShadoop 2.7.7hive 2.3.6sqoop 1.4.7oracle 11.2.0.1.0 Hadoop环境搭建 ...
-
什么是数据仓库仓库就是放东西， 数据仓库就是放数据的，各种数据，肯定是大型的，小型的肯定的没必要了就。这里的大型主要包括业务上的大，以及体积上的大。 数据本来是存储在数据库中的，特别是针对...
-
Red Hat/CentOS 6.4 下载安装yum工具
Red Hat/CentOS 6.4 下载安装yum工具所需的包 在http://mirrors.163.com/centos/6/os/x86_64/ 具体包如下： pyt...
-
酷？？？
Springboot在IDEA中打包JAR出错解决
错误 Invalid or corrupt jarfile 解决方案：将src/main/java/META_INF剪切到目录src/main/resources/META...
-
首先确认你在win7上是可以访问到虚拟机的
其次就是确认你的8123端口是可以外部IP访问的Clickhouse初体验
开篇 最近在实习做一个机器学习聚类相关的项目。在进行数据处理的时候需要使用数据库对数据进行聚合计算来提取特征。由于之前听说过Clickhouse这个由毛子开发的开源数据库速度...
-
Spark伪分布式环境搭建
Spark天生提供的并行计算、分布式计算给大数据的分析提供了非常棒的平台，以往的数据库的很多操作都可以直接在Spark中进行处理，其速度十分快，远远比数据库中的集合操作要爽很...
