首页
建站知识
建站知识
/
2025/1/18 12:02:45
http://www.tqpw.cn/xYPwNJW0.shtml
相关文章
将ArcMap中的符号样式导出的供ArcPad使用
1. 在安装有ArcGIS Desktop的机器上,安装ArcPad。这里采用了各个产品的最新版本,分别是ArcGIS Desktop 10.1 和 ArcPad 10.0.4。 2. 激活ArcMap中的对应扩展: 3. 打开ArcPad 工具条,将当前地图的样式导出。 默认是保存在安装目录下…
阅读更多...
【应用赏析】Las Vegas利用ParkPad(基于ArcPad)实现公园资产管理
Highlights: 1、基于ArcPad软件,ParkPad简化了城市公园的资产采集和管理; 2、采集的数据能够完全无缝的现有的ArcGIS企业服务平台兼容; 3、野外工作人员现在可以通过电子地图来查看公园或其它场馆地点的数据是否被采集。 案例&…
阅读更多...
CDH添加新主机 - 主机上未检测到 Java JDK。
在cloudera manager管理界面上操作往CDH集群添加新主机时,跳过JDK安装的步骤,因为服务器一般都会安装有JDK 全部步骤完成后,到主机配置也发现由如下提示:“主机上未检测到 Java JDK。” 如果不解决这个问题,角色将会…
阅读更多...
CDH Spark java.lang.NoClassDefFoundError: org/apache/hadoop/fs/FSDataInputStream
在启动pyspark2(CDH版本)时: Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/fs/FSDataInputStream网上搜索到的解决办法,是在Spark的spark-env.sh文件中添加下面语句: e…
阅读更多...
启动CDH的cloudera-scm-server报错Error: JAVA_HOME is not set and Java could not be found
错误截图 错误分析 启动脚本中 找不到JAVA_HOME 查看一下启动脚本 find / -name cloudera-scm-server进去看看 发现里面需要读取profile文件但是我配的是在/etc/profile.d文件夹下的 java.shprofile文件中没有JAVA_HOME 我把java.sh独立出来了 解决方案 将JAVA_HOME配到/e…
阅读更多...
CDH整合Flink(CDH6.3.2+Flink1.12.0)
一、准备工作 安装jdk1.8及maven,jdk使用CDH安装包中自带的jdk的rpm包即可 安装完成后添加环境变量 [rootlinux201 ~] vim /etc/profile.d/custom.sh添加如下内容 # JAVA_HOME JAVA_HOME/usr/java/jdk1.8.0_181-cloudera PATH$PATH:$JAVA_HOME/bin# MAVEN_HOME …
阅读更多...
CDH完全卸载教程
适用于各版本CDH卸载 1、停止集群 2、停止cloudera Management Service 3、卸载cloudera manager server(以下称为cm server)以及cloudera manager agent(以下称为cm agent)相关服务 (1)在所有节点停止cm agent服务 $ systemctl stop supervisord$ sy…
阅读更多...
CDH6.3.2集成Apache Flink1.12.0
目录 一、编译Flink1 下载flink源码2 增加maven镜像3 执行编译命令 二、编译parcel1 下载flink-parcel2 修改参数3 复制安装包4 编译parcel5 编译csd6 上传文件 三、CDH集成1 登录CDH2 进入Parcel操作界面3 分配Parcel4 激活Parcel5 回主界面6 添加服务问题1报错解决 问题2报错…
阅读更多...
CDH6.3.2 Hive安装
关注微信公共号:小程在线 关注CSDN博客:程志伟的博客 在CDH上进行Hive安装,过程如下: 1.1 添加服务 1.2 添加Hive服务 1.3 将 Hive 服务添加到 Cluster 1 1.4 配置hive元数据 填写在mysql创建的库名,用户名ÿ…
阅读更多...
CDH6.3.2集群变更IP配置修改
CHD集群在服务器节点的IP改变之后需要修改一些配置,它本身不会如Apache原生软件那样完全依赖服务器的域名映射,我这边本地使用的测试环境是CDH6.3.2的,在启动/关闭上不用担心agent,如果大家用的是其他版本需要注意 1、在修改IP之…
阅读更多...
java提交spark任务到yarn平台
一、背景 采用spark的方式处理,所以需要将spark的功能集成到代码,采用yarn客户端的方式管理spark任务。不需要将cdh的一些配置文件放到resource路径下,只需要配置一些配置即可,非常方便 二、任务管理架构 三、接口 1、maven坐标 <!-- spark依赖 --> <depend…
阅读更多...
继CDH收费之后,这家公司率先推出了免费版大数据套件服务!
背景 在大数据业务系统中,所有技术栈生态均是围绕着存储进行扩展的,目前开源的主流存储技术栈主要包含如下 3 种类型: HDFS:Hadoop 系列套件,包含 Hive、HBase、Phoenix 等; ElasticSearch:包…
阅读更多...
CDH 版 Hadoop 下载
– 昨夜西风凋碧树,独上高楼,望尽天涯路 下载地址:http://archive.cloudera.com/cdh5/ 网页显示如下: 点击 cdh 目录,选择 5 ,进入如下页面,该页面包含了 CDH 5 版本的所有项目: 在…
阅读更多...
CDH6.2.0详细安装步骤
CDH6.2.0版本安装指南 1. 准备集群 本文档使用的是三台虚拟机,IP和主机名自行修改,三台虚拟机需要能联网,并且能够免密登录,这些网上都能找到详细的教程,有问题也可以底部留言交流。 ip名称内存xxx.xx.x.169node16916…
阅读更多...
CDH/CDP 是什么?
前言 本文隶属于专栏《大数据技术体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出,谢谢! 本专栏目录结构和参考文献请见大数据技术体系 CDH CDH ( Cloudera Distribution Hadoo…
阅读更多...
cdh集群搭建(6.3)
如果你的虚拟机给的内存少于14G,不用往下看了,机器压力非常大,建议先装内存条。 我们做大数据的,机器就是要大硬盘,大内存,高核cpu,其他无所谓,如果要做机器学习,那你显卡还得很好。…
阅读更多...
spark3.3.1 for CDH6.3.2 打包
spark3.3.1 CDH 打包 因为 CDH 在 6.3.2 之后开始收费,而自带的spark版本太低,还阉割了 spark-sql 功能。所以我们直接外挂spark3.3.1,使用 CDH 6.3.2 相关的 hadoop lib。 下载相关组件 wget https://archive.apache.org/dist/maven/mave…
阅读更多...
超简单的CDH6部署和体验(单机版)
为什么会超简单 借助ansible简化了CDH6部署工作的大部分内容,也降低了手工操作失误的概率,今天实战的内容,是在一台安装了ansible的电脑上(苹果或Linux操作系统)运行ansible脚本,远程操作一台CentOS服务器,在上面部署…
阅读更多...
CDH大数据平台
一、选取大数据平台 1、CDH大数据平台 CDH大数据平台分为收费版和免费版,收费版和免费版它们共有系统管理、自动化部署、快速检查、统一界面管理、资源管理、高可用(Zookeeper)、管理客户端配置、节点模板、多集群管理、服务主机活动的监控…
阅读更多...
4、zookeeper的java三种客户端介绍-Curator(crud、事务操作、监听、分布式计数器、分布式锁)
Zookeeper系列文章目录 1、zookeeper3.7.1安装与验证 2、zookeeper基本操作及应用示例(shell、java api、应用场景示例) 3、zookeeper的选举----经验证符合事实,网上很多都是错误的 4、zookeeper的java三种客户端介绍-Curator(cr…
阅读更多...
推荐文章
Netman 开源项目使用教程
k8s学习-CKA考试必过宝典
凝思中文乱码Linx GNU/Linux 6.0.80 (jessie)
DDD领域驱动设计-经典四层架构划分 + DDD建模分析过程
QCC3020开发问题汇总(更新中。。。)
深度学习中batch-size介绍
做网站买主机还是服务器,做网站买主机还是服务器
省市二级联动数据库生成代码(JAVA)
微信小程序|使用小程序制作一个核酸检测点查询工具
【Jmeter】前置处理器实战:「BeanShell 预处理程序」参数化手机号码、身份证号
自己建网站的步骤及方法
软件生命周期
AT+CREG? 总是返回0,2或者0,0
“can't find a register in class 'CREG' while reloading 'asm'”错误
AT+CREG AT+CREG
移远EC20模组MQTT连接阿里云平台
EC20调试过程备份
[3G/4G]3G/4G模块开发