大数据 【Spark】Spark On Yarn 安装

一、下载和解压https://archive.apache.org/dist/spark/spark-2.3.1/tar zxv -f spark-2.3.1-bin-hadoop2.7.tgz mv spark-2.3.1-bin-hadoop2.7/ spark-2.3.1二、...

2023-01-16 438 阅读

大数据 Hadoop之Spark集群安装配置

1.  安装模式    1.  本地模式        仅在一台计算机上安装Spark      2.  集群模式        Standalone  独立部署模式,该模式下系统采用Spark自带的简...

2023-01-16 472 阅读

数据库 mysql update语句 in执行效率优化

1、常用的mysql执行更新操作语句如下:UPDATE table1 set num = num + 1 where id in (SELECT id FROM table2 ...

2023-01-16 576 阅读

大数据 (五)springboot 配置多数据源连接mysql和hive

项目结构如下mysql 执行如下建表语句,并插入一条测试数据CREATE TABLE `user` (   `id` int(11) NOT NULL,   `name` varchar(25...

2023-01-15 1664 阅读

未分类 springboot引入hive启动报错Unable to start embedded Tomcat

org.springframework.context.ApplicationContextException: Unable to start web server; nested exception is org.springframework.boot.web.server.WebServerException: Unable to start ...

2023-01-15 540 阅读

大数据 使用hive的beeline连接报错hadoop is not allowed to impersonate hadoop (state=08S01,code=0)解决方案

 使用hiveserver2时通过beeline -u jdbc:hive2://hadoop-master:21000 -n hadoop 连接hive执行insert语句报错 hadoop is not allowed to impersonate hadoop (state=08S01,co...

2023-01-15 668 阅读

未分类 安装 EMQX

EMQX 是一款全球下载量超千万的大规模分布式物联网 MQTT 服务器,自 2013 年在 GitHub 发布开源版本以来,获得了来自 50 多个国家和地区的 20000 余家企业用户的广泛认可,累计连接物联网关...

2023-01-14 703 阅读

未分类 Spring整合Mqtt简单使用

前言MQTT(Message Queuing Telemetry Transport,消息队列遥测传输协议),是一种基于发布/订阅模式的轻量级通讯协议,构建于TCP/IP协议之上,优点是低开销,低宽带占用,适用于物联网、小型...

2023-01-14 717 阅读

未分类 MySQL排序时, ORDER BY将空值NULL放在最后

1. 表结构与数据DROP TABLE IF EXISTS `test`;CREATE TABLE `test` (`id` int NOT NULL AUTO_INCREMENT,`test_id` int DEFAULT NULL,PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=utf...

2023-01-12 637 阅读

未分类 LwM2M协议介绍

1. 协议简介LwM2M是一套适用于物联网的协议。首先,EMQ君从整体上来带领大家来了解一下这个协议,看以下几个问题:LwM2M这几个字母数字摆一起是什么意思?LwM2M协议是由谁定义的?LwM2M最适...

2023-01-12 831 阅读