当前位置: 首页 > news >正文

初见Hadoop—- 搭建MyEclipse 访问HDFS 上的文件

因公司项目需要,开始接触大数据分析这块知识。网上关于大数据这块的知识还是比较多的。学习了一个礼拜了,再次记录一下,自己的学习过程,希望可以帮助后学者少走一些弯路。 
服务端的配置,由于公司项目经理已经配置好,我也就没有过多的接触,我所记录的更多的是如果使用大数据。(JDK 和Eclipse不讲了)

1、下载Hadoop开发环境,下载地址:http://apache.fayea.com/hadoop/common/hadoop-2.7.4/hadoop-2.7.4.tar.gz 。(下载之后里面的bin文件夹下少两个文件hadoop.dll和winutils.exe需下载下来放入里面,地址:http://download.csdn.net/download/lyfzxf/9942732)下载之后需要配置环境变量。这个百度上都有,没难度。

2、首先是安装MyEclipse 插件, 
插件下载地址:http://download.csdn.net/download/lyfzxf/9942700。下载之后直接放到eclipse下面的plugins夹下就好

3、重启eclipse 在Windows –Preferences 下面会出现Hadoop Map/Reduce,点击关联到我们本地的Hadoop文件 
这里写图片描述
配置后,打开Map/Reduce视图模式这里写图片描述 
找到Map/Reduce Loacations操作栏,新建Location 并配置服务器路径这里写图片描述这里写图片描述

至此我们的配置就完成了,此时左边的文件结构一栏会出现 DFS Locations一栏。下面显示的就是服务器端的文件。我们可以通过鼠标右键对其文件进行增删。这里写图片描述 
也可以通过代码对其进行增删。我会在下篇博客介绍。

转载于:https://www.cnblogs.com/Jett/p/7403363.html

相关文章:

  • 有些网站打开一半空白_如何发一条空白的朋友圈
  • 一台服务器能承载多少用户_冰淇淋机多少钱一台?做冰淇淋也能小有成就
  • json web token 网上学习笔记
  • python中函数包括_python函数
  • bzoj1059 [ZJOI2007]矩阵游戏
  • python 直方图的绘制方法全解_python可视化:matplotlib绘制直方图进阶篇!
  • CPU位数、操作系统位数、机器字长、C/C++基本数据类型长度
  • python决策树分类 导入数据集_python中使用scikit-learn和pandas决策树进行iris鸢尾花数据分类建模...
  • 2017/08/22 工作日志
  • 为什么安装了python桌面没有图标_python-pyinstaller不显示图像和图标
  • MySQL Workbench出现:Error Code: 2013. Lost connection to MySQL server during query的问题解决...
  • python运行无响应_python tkinter窗口无响应
  • Ubuntu 报错 sudo: unable to resolve host
  • rtmp推流软件_八爪龙多路直播--导播台推流
  • springboot + swagger2 学习笔记
  • 分享一款快速APP功能测试工具
  • (ckeditor+ckfinder用法)Jquery,js获取ckeditor值
  • ES学习笔记(10)--ES6中的函数和数组补漏
  • GDB 调试 Mysql 实战(三)优先队列排序算法中的行记录长度统计是怎么来的(上)...
  • go语言学习初探(一)
  • Java方法详解
  • JS进阶 - JS 、JS-Web-API与DOM、BOM
  • Rancher-k8s加速安装文档
  • SpringCloud(第 039 篇)链接Mysql数据库,通过JpaRepository编写数据库访问
  • vue 配置sass、scss全局变量
  • 基于游标的分页接口实现
  • 面试遇到的一些题
  • 排序(1):冒泡排序
  • 前端每日实战:70# 视频演示如何用纯 CSS 创作一只徘徊的果冻怪兽
  • 前嗅ForeSpider中数据浏览界面介绍
  • 算法---两个栈实现一个队列
  • 微信小程序上拉加载:onReachBottom详解+设置触发距离
  • ​​快速排序(四)——挖坑法,前后指针法与非递归
  • ​flutter 代码混淆
  • ​sqlite3 --- SQLite 数据库 DB-API 2.0 接口模块​
  • ​力扣解法汇总946-验证栈序列
  • (附源码)springboot掌上博客系统 毕业设计063131
  • (一一四)第九章编程练习
  • **登录+JWT+异常处理+拦截器+ThreadLocal-开发思想与代码实现**
  • .Net Remoting(分离服务程序实现) - Part.3
  • .NET 应用启用与禁用自动生成绑定重定向 (bindingRedirect),解决不同版本 dll 的依赖问题
  • .NET6 命令行启动及发布单个Exe文件
  • /dev/VolGroup00/LogVol00:unexpected inconsistency;run fsck manually
  • @RequestParam @RequestBody @PathVariable 等参数绑定注解详解
  • [AMQP Connection 127.0.0.1:5672] An unexpected connection driver error occured
  • [Angular 基础] - 指令(directives)
  • [AS3]URLLoader+URLRequest+JPGEncoder实现BitmapData图片数据保存
  • [BZOJ2208][Jsoi2010]连通数
  • [datastore@cyberfear.com].Elbie、[thekeyishere@cock.li].Elbie勒索病毒数据怎么处理|数据解密恢复
  • [HTML]Web前端开发技术29(HTML5、CSS3、JavaScript )JavaScript基础——喵喵画网页
  • [JavaWeb学习] idea新建web项目
  • [LaTex]arXiv投稿攻略——jpg/png转pdf
  • [LeetCode] NO. 387 First Unique Character in a String
  • [LeetCode][LCR190]加密运算——全加器的实现
  • [LeetCode]Multiply Strings