讀CSV/TXT的報表怎樣做分頁查詢

今天給大家介紹一下讀CSV/TXT的報表怎樣做分頁查詢。文章的內容小編覺得不錯，現在給大家分享一下，覺得有需要的朋友可以了解一下，希望對大家有所幫助，下面跟著小編的思路一起來閱讀吧。

很容易想到的辦法是把文本數據灌到 RDB 里，利用數據庫分頁機制來做，但這樣做會對數據庫產生很大影響（容量和性能），畢竟要分頁查詢的數據量不會太小。而且如果 CSV/TXT 數據就是從數據庫導出去的，那這種方式基本就行不通了。

用 JAVA 硬寫也是一種辦法，就是比較麻煩，除了要能完成過濾、分組等集合運算，還要考慮異步查詢的效率，如果通過行號（要遍歷數據）確定每頁的查詢范圍，效率就非常低了；通過字節數來確定每頁要讀的數據會快很多，但要保證每次讀取的數據是整條的，如果讀出的最后一條數據被截斷，要有“補尾”機制，下一頁再讀的時候又要“去頭”，要考慮的問題比較多。

直接用支持文本分頁查詢的報表工具會比較簡單，比如這里介紹的實現過程： 海量清單與分組報表的實現 ，用兩行腳本完成創建文件游標和數據過濾，報表基于游標完成異步分頁呈現。這里用了兩個異步線程，取數線程通過封裝好的文本接口返回查詢游標將數據分批緩存到本地，呈現線程根據頁數計算出行數到本地緩存中去獲取數據顯示。這里已經解決了翻頁效率和去頭補尾的問題。

畫個圖感受一下：

②和③分別是兩個線程，前者取數線程負責從文本里分批取數緩存，后者呈現線程負責讀緩存做報表呈現。

這樣做以后，除了報表能異步查詢外，還支持導出 Excel 和打印，比較方便。

以上就是讀CSV/TXT的報表怎樣做分頁查詢的全部內容了，更多與讀CSV/TXT的報表怎樣做分頁查詢相關的內容可以搜索億速云之前的文章或者瀏覽下面的文章進行學習哈！相信小編會給大家增添更多知識,希望大家能夠支持一下億速云！