hsdf dfs -getfacl /
hdfs dfs -setfacl -m user:root:rwx /
hdfs dfs -setfacl -m group:root:rwx /
hdfs dfs -chown -r hdfs:hdfs /tmp
hdfs dfs -chmod 777 /tmp
hadoop fs -getmerge -nl /src /opt/output.txt
hadoop fs -getmerge -nl /src/file1.txt /src/file2.txt /output.txt
hadoop fs -setrep -w 3 /user/hadoop/dir1
hdfs dfsadmin -report
hdfs dfsadmin -setquota
hdfs dfsadmin -setspacequota
注意:這個是以塊大小來配額的,舉例如果設定128m,如果是hdfs是3副本配置,那麼上傳檔案直接會失敗。
hdfs dfsadmin -clrquota
hdfs dfsadmin -clrspacequota
例子:
設定/test目錄,目錄大小為1280m
hdfs dfsadmin -setspacequota 1280m /test
設定/test目錄,檔案數量限制為5
hdfs dfsadmin -setquota 5 /test
hdfs fsck /
hdfs cacheadmin -listpools -stats
hdfs cacheadmin -listdirectives -stats
hdfs cacheadmin -addpool idnmk -owner hive
hdfs cacheadmin -removepool name
show table stats idnmk.t70_rote;
alter table idnmk.t70_rote set cached in 'idnmk';
alter table idnmk.t70_rote set cached in 'idnmk' with replication = 5;
;
alter table idnmk.t70_rote partition(etl-dt=2021-04-12) set cached in 'idnmk';
alter table idnmk.t70_rote set uncached;
目前就先總結到這! 記錄一下工作中用到的hive命令
schematool dbtype mysql initschema nohup hive service metastore 1 mnt metastore.log 2 1 nohup hive service hiveserver2 1 mnt hiveserver2.log 2 1 beeli...
記錄一下工作中遇到的相容問題
工作碰到一點問題,前端開發不是想當然,很有可能是進行線上 更改,哪怕是在2018年,你很有可能還要做ie 6 7 8的相容,相容並不是新增詞綴就可以了 今天碰到乙個問題就是乙個簡單的諮詢 展示,開啟ie8瀏覽器看看,發現不能正確顯示,即元素交疊了,用ie8自帶的開發者工具檢視也是很費勁的,但是基本能...
工作中用到的一些Linux命令
1.檢視檔案時間戳命令 root cdntest69 tools stat check error.xml file check error.xml size 256 blocks 8 io block 4096 regular file device 801h 2049d inode 525575...