spring 使用dynamic-datasource-spring-boot-starter做多数据源及源码分析

多数据源系列1、spring boot2.0 +Mybatis + druid搭建一个最简单的多数据源2、利用Spring的AbstractRoutingDataSource做多数据源动态切换3、使用dynamic-datasource-spring-boot-starter做多...

2022-12-10 482 阅读

java sqoop的java操作,总结归纳,含代码

(下面说的操作hdfs其实和操作hive意思一样,都是文件夹) 最近要在项目中加一个sqoop的功能,需求是将hive的数据导入至mysql,也就是export功能 由于之前没用过sqoop,所以特地去学习怎么使...

2022-12-10 734 阅读

java 解决org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z

1、首先在我们下载.Hadoop bin目录下有hadoop.dll和winutils.exe     我们需要把hadoop.dll拷贝到系统盘:c:\windows\system32下,如图所示:     重新启动idea重新 &...

2022-12-10 614 阅读

java Java代码执行sqoop抽取动作

执行从MySQL数据库导出数据到HDFS上。   执行前需准备: 在eclipse中写的代码,所以,又新加了sqoop-1.4.6-cdh5.5.2.jar放入原有的hadoop项目中,否则会有编译错误。   同时,...

2022-12-10 410 阅读

spring SpringBoot整合Mybatis连接Impala入门案例详解

前期准备创建一个SpringBoot项目,可以先不选择依赖,待会再pom.xml里面再导入相应的依赖。           项目结构     配置环境导入包依赖pom.xmlspring...

2022-12-10 1002 阅读

spring SpringBoot集成Sqoop1.4.6实现关系型数据库与Hive数据库的数据相互同步

前戏在你服务器上安装测试好hive、hadoop、hbase、sqoop这些要用的工具(不会自行百度/Google),目前Sqoop有两个版本分别是sqoop1:1.4.x和sqoop2:1.99.x(这里为什么不选用sqoop2原因自行...

2022-12-10 583 阅读

spring springboot集成sqoop

sqoop我就不再这里给大家介绍了,能来到这里应该都知道sqoop了。目前我写了一个demo,springboot操作sqoop。废话不多说,直入主题。 pom文件<?xml version="1.0" encoding="UTF-8"?>&l...

2022-12-10 426 阅读

spring spring scheduled单线程和多线程使用过程中的大坑!!不看到时候绝对后悔!!

公司在使用定时任务的时候,使用的是spring scheduled。代码如下: @EnableSchedulingpublic class TaskFileScheduleService { @Scheduled(cron="0 */1 * * * ?") public void task1(...

2022-12-10 403 阅读

spring SpringBoot集成Sqoop1.4.6实现关系型数据库与Hive数据库的数据相互同步

在你服务器上安装测试好hive、hadoop、hbase、sqoop这些要用的工具(不会自行百度/Google),目前Sqoop有两个版本分别是sqoop1:1.4.x和sqoop2:1.99.x(这里为什么不选用sqoop2原因自行百度...

2022-12-10 493 阅读

jdbc JDBCTemplate的使用

一、jar包的准备 还需要c3p0相关的包 如果使用的是 c3p0 jdbcTemplate 相关jar包5个 + c3p0 2个 + MySql驱动 1个 = 8个jar 如果使用的是 druid jdbcTemplate 相关jar包5个 + druid 1个 + MyS...

2022-12-10 677 阅读