Question

HDFS 对外提供了可供访问的 http server，开放了很多端口，下面介绍常用的几个端口。

表格 16 haddop 集群管理的 WEB 缺省端口

模板	端口	进程	用途	配置参数
HDFS	50070	NameNode		core-default.xml dfs.http.address
	50075	DataNode		hdfs-default.xml dfs.datanode.http.address
	50090	SecondaryNameNode		mapred-default.xml，指向监听端口 9000
MR	50030	JobTracker		mapred-default.xml mpared.job.tracker.http.address
	50060	TaskTracker		mapred-default.xml mpared.task.tracker.http.address
	8088		Hadoop cluster 集群管理, YARN	ResourceManager, apllications
	8042		Hadoop cluster node
Spark	4040		Spark 集群管理页面	spark 当前运行模式（如 pyspark/spark-shell）的管理页面，包括 jobs, stage, storage, environment, executors.
	8081	Master	Spark master	8080+1, 缺省 8080，若端口被占用，顺延
	8082	Worker	Spark worker	8080+2, 指向 master 7077，cluster 6066
Hive
HBase	60010		HBase 查看 HBase 集群

备注：1. 可用 lsof -i 或者 netstat -npl 或 jps 查看端口及对应服务进程。

2. Hadoop 守护进程向用户提供的 HTTP 地址有以下几种：

• /loglevel 日志级别
• /statcks：显示当前所有线程的堆栈情况，主要用于调试
• /metrics：显示所有 metrics 信息。
• /logs：显示所有日志文件