大資料 Linux安裝詳解及簡單命令用法

2021-09-25 08:33:27 字數 1618 閱讀 8947

一、 linux安裝

1、 vm虛擬機器新建虛擬機器

2、 自定義配置

3、 稍後安裝作業系統

4、 linux—centos 64 位

5、 設定名稱 設定安裝位置

6、 使用net位址

7、 配置硬體 cd/***—設定iso映象檔案

8、 userallspace

9、 設定登陸密碼

10、重啟系統

二、 網路配置

1、 登陸root/login

2、 檢視網段—ifconfig

3、 修改ipaddr—vi /etc/sysconfig/network-scripts/ifcfg-eth0

4、 重啟系統

5、 xshell連線—ssh [email protected].***.***

三、 大資料基礎概念

大資料,指無法在一定時間範圍內用常規軟體工具進行捕捉、管理和處理的資料集合,是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的資訊資產。

四、 linux簡單命令 (命令 -help 檢視幫助)

type:判斷命令型別------例:type clear

help:內部命令幫助手冊-----例:help shutdown

man:外部命令幫助手冊-----例:man rm

whereis:定位命令位置----例:whereis rm

file:檢視檔案型別----例:file bin

echo:列印輸出----例:echo 123或echo 『123』或echo 「123「

$path:環境變數路徑

$lang:編碼格式

vi:全屏文字編輯器—例:vi bin

ps -fe:檢視程序列表

echo $$:檢視當前shell的pid

hash -r:清楚快取

rm -ir:刪除目錄----例:rm -ir bin

ls:顯示目錄

cd:切換目錄

mkdir:建立目錄

mv:移動

cp:拷貝

df:顯示磁碟使用情況

du:顯示檔案系統使用情況

pwd:顯示當前工作目錄

五、 filesystem hierarchy standard(檔案系統層次化標準):

根檔案系統:/ 是所有檔案和目錄的起點根

/boot: 系統啟動相關的檔案,如核心、initrd,以及grub(bootloader)

/dev: 裝置檔案

/etc:配置檔案

/home:使用者的家目錄,每乙個使用者的家目錄通常預設為/home/username

/root:管理員的家目錄;

/lib:庫檔案 :沒有執行入口的應用程式

/media:掛載點目錄,移動裝置

/mnt:掛載點目錄,額外的臨時檔案系統

/opt:可選目錄,第三方程式的安裝目錄

/proc:偽檔案系統,核心對映檔案

/sys:偽檔案系統,跟硬體裝置相關的屬性對映檔案

/tmp:臨時檔案, /var/tmp

/var:可變化的檔案

/bin: 可執行檔案, 使用者命令 存放的是使用者級基礎功能的二進位制檔案

/sbin:管理命令

大資料之Kafka集群安裝及簡單使用

1.2 解壓安裝包 tar zxvf export software kafka 2.11 0.8.2.2.tgz c export servers 1.3 修改配置檔案 vi export servers kafka config server.properties 輸入以下內容 broker的全...

大資料詳解

一 大資料的起源 最早提出大資料時代到來的是麥肯錫 資料,已經滲透到當今每乙個行業和業務職能領域,成為重要的生產因素。人們對於海量資料的挖掘和運用,預示著新一波生產率增長和消費者盈餘浪潮的到來。二 大資料思維 那麼,什麼是大資料思維?維克托 邁爾 捨恩伯格認為,1 需要全部資料樣本而不是抽樣 2 關...

Linux安裝matlab及簡單操作

12 資料準備 1 解壓 r2017b glnxa64.z01 和 r2017b glnxa64.z02 在同乙個資料夾,並壓縮成以 iso 結尾的檔案備用 2 在linux使用mkdir建立4個資料夾,包存放路徑 掛載路徑 欲安裝路徑 啟用配置檔案存放路徑 mkdir home disk1 mat...