如何快速生成2000萬行資料

2021-06-20 10:09:08 字數 594 閱讀 4845

原文:

文字三個要求

1,字串長度為16  

2,字串只能包含大小寫字母和數字(隨機的)

3,要求生成2000萬行的txt文字

想通過shell完成,不知最快需要多久

生成的部分文字:

hiszop0nkn9d2amg

ztv3rtsmdxjjxqba

hygphqjo7qw0kmel

1rbx0t4rsha8opi4

qqiztalrvoul7fbh

wpvejkvyhhjkfybg

5hgxesxmx8ejs1cf

mttrymbwsufrqijz

g0ljnydsflwz4mwy

b7zwqdrqpvmsew8a

spxyypdayb7mbpr1

qgyakerzutshvgo4

k0condr8hlcyoors

shell命令:

tr -dc a-za-z0-9 < /dev/urandom |fold -w 16 |head -20000000 >file

shell 生成2000萬行的TXT文字

文字三個要求 1,字串長度為16 2,字串只能包含大小寫字母和數字 隨機的 3,要求生成2000萬行的txt文字 想通過shell完成,不知最快需要多久 生成的部分文字 hiszop0nkn9d2amg ztv3rtsmdxjjxqba hygphqjo7qw0kmel 1rbx0t4rsha8op...

大資料量表如何統計行數 1000萬行資料以上

今天討論乙個問題 當乙個表有1000萬行以上的資料,我們如何知道這個表中的資料行數?起初我們說用count來統計,但是這樣做的是錯誤的.當有多個count的sql語句查詢的時候會出現伺服器受不了的情況.那怎麼做呢?乙個哥們提出了乙個方法 建立一張新錶兩個欄位tablename 表明 rowcount...

讀取超大Excel(39萬行資料)

有個學長需要處理excel資料,excel資料共有39w,將資料讀取後處理並匯出資料。最開始嘗試了 npoi 發現npoi 並不能完成該項任務,隨後嘗試引用的com元件 microsoft.office.interop.excel.dll 讀取excel檔案 最終 也以失敗告終。最終,採用 將exc...