Hadoop:分布式资源调度YARN 2020-06-18 HadoopYARN YARN全称:Yet Another Resource Negotiator。 一个Cluster Resource Management 阅读全文
Hadoop HDFS JAVA API操作 2020-06-18 HDFSHadoop大数据 1. 环境搭建 IntelliJ IDEA 新建 Maven 项目 勾选 Create from archetype 选择 org.apache.maven.archetypes:maven-archetype-quickstart,点击Next Maven home directory可以默认,也可以选择自己安装的Maven目录 User settings file勾选Override,选择用户自定义的~/.m2/settings.xml文件 pom.xml 配置 阅读全文
CDH Hadoop安装过程 2020-06-08 Hadoop安装教程 1. 安装环境 操作系统:Ubuntu 18.04 64位 Hadoop版本:hadoop-2.6.0-cdh5.7.0.tar.gz JDK版本:jdk-8u241-linux-x64.tar.gz 2. Hadoop伪分布式安装操作环境:macOS终端 ssh 远程连接Ubuntu 2.1. 下载地址12wget https://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0.tar.gz #Hadoop安装包wget http://enos.itcollege.ee/~jpoial/allalaadimised/jdk8/jdk-8u241-linux-x64.tar.gz #JDK安装包 阅读全文