林子雨大数据java练习

由于截图丢失，仅凭记忆记录。

代码源自：《附录A：林子雨-大数据课程实验答案》

十道HDFS练习题，一道MapReduce实现K-means的题目

K-means代码借鉴地址https://blog.csdn.net/qq_35488275/article/details/66473942

将hadoop带有的eclipse-Hadoop-plugin包放入eclipse专门的插件包地址，创建MapReduce工程环境
配置hadoop本机和客户机的地址和端口，新建hadoop项，本地节点输入本机hdfs地址：如1SPC38和端口9000,两个地址都填一样的，我也没搞懂为什么要这样，但试了一下确实成功了

在java文件中需要填conf的部分填写hdfs://1SPC38:9000（具体情况具体分析）有的地方是localhost，这里其实把它换成刚才配置好的1SPC38就可以了

然后根据教程代码进行具体的修改就可以了，答案有些地方有误，需要自行修改，都很简单，如果要实现更多提示功能，添加一个Scanner功能就好。

这是本人自学习java以来成功实现的第一个程序，全部看懂并且有自己的修改，对java学习有很大帮助，并且切身体验了hadoop集群的强大，之后可能会用它来做一切数据挖掘工作。代码下周或者下下周上传。

林子雨大数据java练习相关推荐

林子雨大数据技术原理与运用期末复习
一.填空题 1.大数据的数据结构类型包括结构化数据.半结构化数据和___非结构化数据____. 2.大数据的4V10是(只填英文)__数据量大__Volume____._数据类型多_Variety__ ...
林子雨大数据实验八Flink部分代码
1.pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="h ...
林子雨—大数据技术原理与应用—上机实验三
题目:熟悉常用的HBase操作实验环境: 操作系统:ubuntu16.04 hadoop版本:1.2.1 JDK版本:1.8 Eclipse ...
林子雨—大数据技术原理与应用—上机实验二
题目:熟悉常用的HDFS操作实验环境: 操作系统:ubuntu16.04 hadoop版本:1.2.1 JDK版本:1.8 Eclipse 3 ...
大数据 java 代码示例_功能Java示例第7部分–将失败也视为数据
大数据 java 代码示例这是称为" Functional Java by Example"的系列文章的第7部分. 我在本系列的每个部分中开发的示例是某种"提要处理程序 ...
大数据 java 代码示例_Java变量类型与示例
大数据 java 代码示例 Java变量 (Java variables) Variables are the user-defined names of the memory blocks, and ...
大数据+java交流微信群
一起进行大数据+Java的知识传递与分享,快来加入吧!! 本人程序员,发现身边很多朋友经常会问一些技术问题,特建立微信群供全国各地的朋友一起讨论学习,资源共享,本人也积累了很多专业性的资料,不定期分享 ...
一起重新开始学大数据-java篇-DAY01-第一个java代码helloworld
一起重新开始学大数据-java篇 -DAY01-第一个java代码helloworld 计算机: 按照指定程序,自动高速处理海量数据计算机组成硬件和软件组成硬件: cpu:计算内存:提供计算资 ...
【全集】大数据Java基础
课程介绍本课程是由猎豹移动大数据架构师,根据Java在公司大数据开发中的实际应用,精心设计和打磨的大数据必备Java课程.通过本课程的学习大数据新手能够少走弯路,以较短的时间系统掌握大数据开发必备语 ...
视频教程-大数据Java强化班(十)之大数据爬虫-Java
大数据Java强化班(十)之大数据爬虫 10年一线开发及项目管理经验,6年以上大数据项目架构.实施.开发与运维经验,骨灰级大数据玩家,对Hadoop.Storm.Spark.Flink.Kylin.D ...

林子雨大数据java练习

林子雨大数据java练习相关推荐

最新文章

热门文章