个人笔记
  • 备忘
    • ava 进程占用 VIRT 虚拟内存超高的问题研究
    • Yarn 虚拟内存详解
    • python魔术方法
    • Python/WSGI应用快速入门
    • CDH下载
    • gdb100个小技巧

yarn程序执行流程

tangzehang 大数据相关 五月 3, 2018

1:客户端提交任务到RM 2:RM申请资源先执行程序的ApplicationMaster 3:Applicat
Read More »

spark一些配置

tangzehang 大数据相关 四月 20, 2018

System.setProperty("HADOOP_USER_NAME", "XXXX")   //程序执行
Read More »

hive切换运行模式

tangzehang 大数据相关 四月 20, 2018

set hive.execution.engine=spark; (或者mr) set spark.maste
Read More »

hive动态分区

tangzehang 大数据相关 四月 18, 2018

set hive.exec.dynamic.partition.mode=nostrick; hive.exe
Read More »

1 … 3 4
分类目录
  • JAVA (4)
  • Python (6)
  • 一些小东西 (4)
  • 大数据相关 (19)
  • 机器学习 (1)
  • 系统 (12)
  • 踩过的坑 (12)

粤ICP备18039485号