在很多情況下，會需要將批量生成（如按天生成的記錄）匯入到hive中。針對這種應用場景，進行實驗。
首先需要進行檔案目錄的遍歷，借助scala強大的函式式程式設計能力，利用array中的map函式進行操作即可。
如函式如下：
def loadintohive(sc:hivecontext,dir:string):unit=
}那麼在函式processcdrfile中，需要指定如何匯入hive的語句，即可實現對指定型別檔案按照建表的方式進行匯入到hive中。
thinkcmf 使用phpexce 批量匯入
用的是thinkcmf5.3 本地環境phpstudy 首先安裝phpexcel，我用的是composer直接安裝 composer require phpoffice phpexcel因為頭一次用，所以比較詭異 然後引入 use phpexcel iofactory use phpexcel pu...
Spark sql hive 整合問題
1 exception in thread main org.apache.spark.sql.catalyst.analysis.nosuchdatabaseexception database portrait not found at org.apache.spark.sql.catalyst...
COPY命令 為PostgreSQL批量匯入資料
任務 將excel表中的資料匯入到postgresql資料庫的某張表中。工具 postgresql客戶端pgadmin。步驟 1.將excel 字段，按照postgresql 資料庫中表的字段順序來整理資料，並儲存為csv檔案。2.用記事本開啟csv檔案，另存為utf 8格式。copy testda...