소스 검색

add Linux remote scp, rsync, remote run

ZhenQin 11 년 전
부모
커밋
4202d7a549
3개의 변경된 파일21개의 추가작업 그리고 0개의 파일을 삭제
  1. 7 0
      rsync/remote-run.sh
  2. 7 0
      rsync/rsync_hadoop.sh
  3. 7 0
      rsync/scp_hadoop.sh

+ 7 - 0
rsync/remote-run.sh

@@ -0,0 +1,7 @@
+SLAVE_NAMES=$(cat "$HADOOP_HOME/etc/hadoop/slaves" | sed  's/#.*$//;/^$/d');
+#echo $SLAVE_NAMES
+for s in $SLAVE_NAMES
+do
+    echo $s
+    ssh hadoop@$s "cd /opt/software/hadoop/share/hadoop/mapreduce; rm -rfv mapreduce; ls ./"
+done

+ 7 - 0
rsync/rsync_hadoop.sh

@@ -0,0 +1,7 @@
+SLAVE_NAMES=$(cat "$HADOOP_HOME/etc/hadoop/slaves" | sed  's/#.*$//;/^$/d');
+#echo $SLAVE_NAMES
+for s in $SLAVE_NAMES
+do
+    echo $s
+    rsync -vazu --progress share/hadoop/mapreduce/* hadoop@$s:/opt/software/hadoop/share/hadoop/mapreduce/
+done

+ 7 - 0
rsync/scp_hadoop.sh

@@ -0,0 +1,7 @@
+SLAVE_NAMES=$(cat "$HADOOP_HOME/etc/hadoop/slaves" | sed  's/#.*$//;/^$/d');
+#echo $SLAVE_NAMES
+for s in $SLAVE_NAMES
+do
+    echo $s
+    scp -r share/hadoop/mapreduce/* hadoop@$s:/opt/software/hadoop/share/hadoop/mapreduce/
+done