完全分布式Hadoop集群搭建
环境说明 操作系统：CentOS 8 x86_64 Hadoop版本：2.10.1 节点数：3 服务器规划： node1 n...
哈哈
2022-06-06 14:02:42阅读：120
-
-
Hadoop生态系统介绍
Hadoop生态系统介绍 Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。 它使我们能用一种简单的编程模型来处理存储于集群上的大...
符号 2022-06-06 14:02:33阅读：120 -
Hadoop集群基础操作
Hadoop集群基础操作 Hadoop集群基本信息查看 集群存储信息查看 登录HDFS监控web查看运行情况及相关存储信息，默认端口为50070，具体以hdfs...
阿里 2022-06-06 14:02:28阅读：120 -
Hive安装详细步骤
Hive安装详细步骤 基础环境准备 Hive安装前，首先以安装完成Hadoop，且本文中使用MySQL作为Hive的元数据存储库，MySQL数据库也要提前准备好，关...
虾米哥 2022-06-06 14:02:18阅读：119 -
Hive基础简介
Hive基础简介 关于Hive Hive是什么 Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上，总归为大数据，并使得...
你猜 2022-06-06 14:02:15阅读：121 -
Spark模式及运行
spark shell本地模式： （1）使用spark shell需要开启Hadoop集群，在/home/hadoop/apps/spark-2.2.0-bin-hadoop2.7目录下执...
访客 2021-11-06 11:08:04阅读：355 -
Spark History Server配置、启动、spark运行环境优化
Spark History Server配置 （1）spark history server查看运行完成的作业信息和日志 （2）配置Hadoop的yarn-site.xml文件，所有节...
阿里 2021-11-06 11:06:49阅读：364 -
hive创建自定义udf
实现一个base64加密函数 1、实现java类 package com.zheng.udf; import java.util.Base64; import org.apac...
熊孩纸 2021-11-03 14:32:22阅读：363 -
启动hadoop集群 jps 查看不到DataNode
出现问题：hadoop集群起来以后，jps查看进程，看不到DataNode 根本原因：hadoop集群由原来3个节...
访客 2021-09-04 18:23:16阅读：402
