个人笔记
  • 备忘
    • ava 进程占用 VIRT 虚拟内存超高的问题研究
    • Yarn 虚拟内存详解
    • python魔术方法
    • Python/WSGI应用快速入门
    • CDH下载
    • gdb100个小技巧

yarn调度策略

tangzehang 大数据相关 五月 31, 2018

1.先进先出调度器 2.容量调度器 3.公平调度器 三种调度器的基础都是队列。每种调度器选择队列的任务已经队列
Read More »

spark内存说明

tangzehang 大数据相关 五月 18, 2018

单个executor内存: SPARK_EXECUTOR_MEMORY+ spark.yarn.executo
Read More »

spark reduceByKey和groupbyByKey区别

tangzehang 大数据相关 五月 11, 2018

reduceByKey用于对每个key对应的多个value进行merge操作,最重要的是它能够在本地先进行me
Read More »

注解原理

tangzehang JAVA 五月 11, 2018

注解本质是一个继承了Annotation的特殊接口,其具体实现类是Java运行时生成的动态代理类(getAnn
Read More »

StringBuilder,StringBuffer; HashMap,HashTable;ArrayList,Vector;

tangzehang JAVA 五月 11, 2018

StringBuilder线程不安全,StringBuffer线程安全 HashMap线程不安全,HashTa
Read More »

1 … 3 4 5 … 10
分类目录
  • JAVA (4)
  • Python (6)
  • 一些小东西 (4)
  • 大数据相关 (19)
  • 机器学习 (1)
  • 系统 (12)
  • 踩过的坑 (12)

粤ICP备18039485号