Hadoop2.7.5伪分布式配置及遇到的问题总结
系统信息
操作系统:Ubuntu 16.04.4 LTS 64bit
Hadoop版本:Hadoop 2.7.5
JDK版本:JDK 1.8.0_161 64bit
参考资料
hadoop2.x配置
hadoop2.7.3伪分布式搭建之三------>Hadoop2.7.3的安装
NameNode进程未启动
一、修改配置文件
关于JDK的安装及其环境变量的配置,此处不作赘述。
关于hosts和hostname的说明:
由于是单机伪分布,此处我将hostname修改成localhost,修改/etc/hostname即可。/etc/hosts文件只保留127.0.0.1 localhost,修改完后记得重启电脑使之生效。
在Apache Hadoop官网Release页面选择好某个版本的binary版,下载,解压至/usr/local/下
这里,我的hadoop目录为/usr/local/hadoop-2.7.5
进入hadoop目录,首先新建文件夹tmp和hdfs,接着,在hdfs里面新建data和name两个文件夹
12mkdir tmp hdfsmkdir - ...
李宏毅机器学习笔记
课程地址:http://speech.ee.ntu.edu.tw/~tlkagk/courses_ML17_2.html
Lecture 0-1: Introduction of Machine Learning
人工智能是目标,机器学习是手段,深度学习是机器学习的一种方法
人工智能还是人工智障?
图片来源:http://www.commitstrip.com/en/2017/06/07/ai-inside/
什么是机器学习?
机器学习的步骤
1.define a set of function
2.goodness of function
3.pick the best function
半监督学习:既包含有label的数据又包含无label的数据
迁移学习:跟我们现在考虑的问题没什么特别联系
无监督学习:完全无label
Structured Learning
增强学习:AlphGo里有用到。机器所拥有的只有一个分数,从评价中去学习。
Regression
回归可以做什么?
股票预测、无人驾驶、推荐等
举例:预测宝可梦进化后的CP值
每只宝可梦,都有cp ...
斯坦福CS229课程资料
公开课地址:http://open.163.com/special/opencourse/machinelearning.html
主讲人:Andrew·Wang(吴恩达)
教学安排与大纲:http://cs229.stanford.edu/syllabus.html
讲义翻译:https://kivy-cn.github.io/Stanford-CS-229-CN/#/
PDF版中文讲义:
README.pdf
cs229-notes1.pdf
cs229-notes2.pdf
cs229-notes3.pdf
cs229-notes4.pdf
cs229-notes5.pdf
cs229-notes6.pdf
cs229-notes7a.pdf
cs229-notes7b.pdf
cs229-notes8.pdf
cs229-notes9.pdf
cs229-notes10.pdf
cs229-notes11.pdf
cs229-notes12.pdf
cs229-notes13.pdf
cs229-notes-BP.pdf
cs229-notes-deep_learning. ...
git命令总结
一、 基础知识
工作区:写代码
暂存区:临时存储
本地库:历史版本
graph LR
A[工作区]-->|git add|B[暂存区]
B-->|git commit|C[本地库]
Git和代码托管中心
代码托管中心:维护远程库
局域网环境下
GitLab
…
外网环境下
GitHub
码云
…
本地库和远程库
团队内部协作
graph LR
A[本地库1]-->|"1.git push(项目管理者)"|B[远程库]
B-->|2.git clone|C[本地库2]
C-->|"3.git push(需加入团队)"|B
B-->|"4.git pull"|A
跨团队协作
graph LR
A[远程库1]-->|"1.fork"|B[远程库2]
B-->|"2.git clone"|C[本地库]
C-->|"3.git push"|B
B-->|"4.pull request -> 审核 -> merge"|A
二、实践
初始化目录
1git init
其中,.git目录中存 ...
相关链接
顶会
ICLR
论坛
王道论坛
鸿鹄论坛
红客联盟
pdawiki
友链
阮一峰的网络日志
+7
VOID001’S WOWO
饭团表弟
神奇的战士
蓝色早晨
龙哥盟
我的关注
李宏毅
北语杨天麟老师
技术栈
ApacheCN
Linux Kernel
鸟哥的Linux私房菜
Study-Area
hexo
github
PAT
LeetCode刷题
Aminer
云服务
七牛云
腾讯云
阿里云
AWS
LeanCloud
工具
iconfont
Google翻译
唧唧
pdf在线转换
Smallpdf
ilovepdf
poro
一枝红杏
pygments
超级简历
MSDN
图片&配图
Unsplash
Pexels
pixabay
电影
RARBG