文章詳情頁
java - 怎樣優化接口返回大體量數據?
瀏覽:129日期:2023-12-13 14:53:33
問題描述
需求描述:
外圍平臺調用接口根據手機號查詢用戶的歌單推薦信息,每個用戶會有一千條左右的推薦信息,每條推薦信息包括了,歌曲ID、歌曲名稱、版權ID、試聽地址字段。
我需要關聯多張表查詢,每次查詢時間大概4s左右,查詢出來后還需要組裝數據,然后才返回接口。
返回格式是json。這樣的話接口返回會比較慢。
想過提前將數據放redis集群,但是后來否定了,因為用戶量大概是500多萬,每個用戶的推薦信息大小大概200kb,存redis的話會耗費大量的內存,所以否定了。但是想不到其它給好的處理方法,請各位大神幫忙看看這樣一個需求有什么好的處理建議嗎?感謝!
問題解答
回答1:瓶頸出在查詢很多張表需要4秒上,這里面的邏輯有可以優化的點嗎?如果沒有那么這4秒必須花費,其他的數據傳輸格式,網絡通信時間再優化也無法小于4秒了。要么在客戶端在某個用戶無感知的情況下發推薦請求,要么優化查詢邏輯。
回答2:你鏈表查詢,把你的sql貼出來,另外為什么不分開查詢呢?估計你耗時在SQ
回答3:1.一次返回一千條?一次50條會不會快點呢?多次分頁請求呢?2.覺得直接把緩存方案否了不妥,500多w的用戶,并不都是活躍用戶,估算出活躍用戶的量的redis可以接受不?3
回答4:在【推薦信息】上添加ID屬性,保存在redis,這個量應該不會大。
每個用戶推薦的信息也存在redis上,但是只保存1000個【推薦信息】的ID。
這樣的話就不會造成每個用戶的推薦信息有200kb了。
標簽:
java
相關文章:
1. mysql 查詢身份證號字段值有效的數據2. mysql - 把一個表中的數據count更新到另一個表里?3. 請教使用PDO連接MSSQL數據庫插入是亂碼問題?4. mysql - 分庫分表、分區、讀寫分離 這些都是用在什么場景下 ,會帶來哪些效率或者其他方面的好處5. python - 數據與循環次數對應不上6. python - 爬蟲模擬登錄后,爬取csdn后臺文章列表遇到的問題7. 視頻文件不能播放,怎么辦?8. 黑客 - Python模塊安全權限9. Python爬蟲如何爬取span和span中間的內容并分別存入字典里?10. node.js - nodejs開發中常用的連接mysql的庫
排行榜
