JAVA8虚拟内存问题
java 8 进程的 VIRT 虚拟内存使用超高 现代操作系统里面分配虚拟地址空间操作不同于分配物理内存。在6
Read More »
hive表结构以及hdfs文件大小命令
方法1：查看表的字段信息 desc table_name; 方法2：查看表的字段信息及元数据存储路径 desc
Read More »
pycharm开发pyspark的坑
windows进行pyspark安装的时候，用cmd命令行执行pyspark一切正常。 后面桌面点击pycha
Read More »
sqoop hive-import坑
sqoop 进行hive-import的时候，如果导入一个已经存在的分区，要注意导入的路径问题，如果导入跟分区
Read More »
hive on spark (Failed to create spark client)
执行hive的时候,发现Failed to create spark client. 没去检查日志,想了想,可
Read More »