以前有寫過一篇如何實現乙個處理php中需要載入大資料量配置檔案的乙個文章,最近開始玩git,於是整理了一下把它發到github上去了,有需要的同學可以去看看
另外以前寫過了一些東西也將會陸續放到github上去,包括
amflib 乙個c++版本的amf庫
amysql 乙個用boost::asio實現的非同步mysql連線庫,自帶連線池
amemcache 乙個用boost::asio實現的非同步memcache客戶端,自帶連線池
dataproxy 乙個利用amysql和amemcache實現的資料中介軟體,可以快取mysql查詢資料,自帶分表以及應用層鎖功能
btlog 乙個利用boost::asio實現的日誌庫,上面的所有庫都用它來列印日誌
php 大資料量匯出
之前的正常匯出,幾萬條資料就把記憶體擠爆了,優化了一下匯出方式,記憶體無壓力匯出速度槓槓的 會員時手機匯出 public function user outputexcel else count count data num 0 f null foreach this getcounts count...
大資料量的處理
其實這個問題老是在面試的時候提到 1。建立專門的彙總表 這個表一般是每天晚上做統計處理 建立索引 索引的話,插入和修改會變慢,也是只做統計原因之一 用來查詢,如果量非常大,那麼分表,還是大,那麼分庫,就是資料倉儲概念了 2。關聯表查詢 多表聯合查詢 的大資料,首先就是1 把多個表做成乙個統計表,或者...
Oracle大資料量分頁通用儲存過程
v sql select from select a.rownum rn from p sqlselect a where rownum to char v heirownum bwhere rn to char v lowrownum 注意對rownum別名的使用,第一次直接用rownum,第二次...