如何解決PHP查詢大量數(shù)據(jù)內(nèi)存耗盡的問(wèn)題

1、解決這個(gè)問(wèn)題，首先需要查看你的程序是否分配了過(guò)多的內(nèi)存，在程序沒(méi)有問(wèn)題的情況下，你可以通過(guò)一下方法來(lái)增加PHP的內(nèi)存限制（memory_limit）。

專注于為中小企業(yè)提供做網(wǎng)站、成都網(wǎng)站設(shè)計(jì)服務(wù),電腦端+手機(jī)端+微信端的三站合一,更高效的管理,為中小企業(yè)城區(qū)免費(fèi)做網(wǎng)站提供優(yōu)質(zhì)的服務(wù)。我們立足成都，凝聚了一批互聯(lián)網(wǎng)行業(yè)人才，有力地推動(dòng)了超過(guò)千家企業(yè)的穩(wěn)健成長(zhǎng)，幫助中小企業(yè)通過(guò)網(wǎng)站建設(shè)實(shí)現(xiàn)規(guī)模擴(kuò)充和轉(zhuǎn)變。

2、來(lái)個(gè)100人同時(shí)點(diǎn)，你要用的是普通的虛擬機(jī)就不行了。最好是換種方式實(shí)現(xiàn)，不要通過(guò)網(wǎng)頁(yè)進(jìn)行采集?？梢苑浅：?jiǎn)單的在數(shù)據(jù)庫(kù)的表，創(chuàng)建一個(gè)采集隊(duì)列，后臺(tái)執(zhí)行一個(gè)crontab的計(jì)劃任務(wù)，去完成隊(duì)列里的采集任務(wù)。

3、要分層次顯示，另外碰到數(shù)據(jù)庫(kù)查詢文字非常多的你還可以使用AJAX 返回?cái)?shù)據(jù) 這樣HTML就可以很快的顯示 顯示完畢才去讀數(shù)據(jù)庫(kù)這樣速度會(huì)快很多。至于樓上說(shuō)的 緩存 數(shù)據(jù)庫(kù)存儲(chǔ)過(guò)程 可以參考一下，不過(guò)一般企業(yè)站不需要考慮。

4、而且如果使用mysql的話，它也有一個(gè)超時(shí)時(shí)間，運(yùn)行一串代碼時(shí)間如果超過(guò)配置文件的時(shí)間，會(huì)被中斷不運(yùn)行。第一種你可以修改php配置文件timeout的運(yùn)行時(shí)間，第二你可以分批處理大量數(shù)據(jù)，注意是分批處理，就OK了。

5、使用緩存，比如memcache，redis，因?yàn)樗鼈兪窃趦?nèi)存中運(yùn)行，所以處理數(shù)據(jù)，返回?cái)?shù)據(jù)非?？欤钥梢詰?yīng)對(duì)高并發(fā)。

PHP效率問(wèn)題,上萬(wàn)條數(shù)據(jù)一次性取出?還是分開(kāi)取出處理?

php使用的數(shù)據(jù)庫(kù)一般是mysql，當(dāng)數(shù)據(jù)量大于1000萬(wàn)時(shí)，為了效率最好還會(huì)進(jìn)行分表存儲(chǔ)。

個(gè)人建議還是拆分的比較好，一次查詢雖然寫(xiě)法上可能會(huì)省代碼，但是效率就很低下，因?yàn)榧词辜恿怂饕?，而在你?lián)合查詢 的時(shí)候語(yǔ)句寫(xiě)的不當(dāng)就會(huì)導(dǎo)致索引不生效，從而效率就會(huì)下降。

1并不是所有索引對(duì)查詢都有效，SQL是根據(jù)表中數(shù)據(jù)來(lái)進(jìn)行查詢優(yōu)化的，當(dāng)索引列有大量數(shù)據(jù)重復(fù)時(shí)，SQL查詢可能不會(huì)去利用索引，如一表中有字段sex，male、female幾乎各一半，那么即使在sex上建了索引也對(duì)查詢效率起不了作用。

首先，安裝程序會(huì)顯示一個(gè)啟動(dòng)畫(huà)面。如果使用的是不同的安裝盤，也許Readme文件的格式可能有所不同，但是不影響應(yīng)用程序的安裝。在上面的對(duì)話框中可以直接單擊對(duì)話框上的【下一步】按鈕，進(jìn)入下面的操作。

解決大量數(shù)據(jù)，要么你OOP特別強(qiáng)，寫(xiě)的非常合理，老話：內(nèi)聚高，耦合低；要么就化整為零。本來(lái)PHP就不太適合處理特別大的數(shù)據(jù)。本身程序的健壯性就沒(méi)其他語(yǔ)言強(qiáng)。

我的思路是這樣：除了數(shù)據(jù)文本db.txt外，另建一個(gè)文本counter.txt用于記錄訪問(wèn)的次數(shù)n。當(dāng)?shù)谝粋€(gè)用訪問(wèn)時(shí)，程序先將counter.txt改為counter.lock，然后將里邊n=n+1，再改回原來(lái)的名字。并開(kāi)始訪問(wèn)相應(yīng)的n*50條記錄。

php千萬(wàn)條數(shù)據(jù)量查詢速度問(wèn)題

2在新建臨時(shí)表時(shí)，如果一次性插入數(shù)據(jù)量很大，那么可以使用 select into 代替 create table，避免造成大量 log ，以提高速度；如果數(shù)據(jù)量不大，為了緩和系統(tǒng)表的資源，應(yīng)先create table，然后insert。

顯示數(shù)據(jù)取出部分?jǐn)?shù)據(jù)的方法最常用的是分頁(yè)方式，分頁(yè)是僅讀取前面的幾十頁(yè)信息，讀取數(shù)據(jù)庫(kù)是很快的，可以比較一下10條和100條的顯示速度，差很遠(yuǎn)。

你的查詢需求中，最常用的where字段是什么，然后在數(shù)據(jù)表中給這個(gè)字段建立索引。多表查詢、嵌套查詢的話，就得優(yōu)化sql了，這個(gè)得具體情況具體分析了。

要分層次顯示，另外碰到數(shù)據(jù)庫(kù)查詢文字非常多的你還可以使用AJAX 返回?cái)?shù)據(jù) 這樣HTML就可以很快的顯示 顯示完畢才去讀數(shù)據(jù)庫(kù)這樣速度會(huì)快很多。至于樓上說(shuō)的 緩存 數(shù)據(jù)庫(kù)存儲(chǔ)過(guò)程 可以參考一下，不過(guò)一般企業(yè)站不需要考慮。

避免使用！=或＜＞、IS NULL或IS NOT NULL、IN ，NOT IN等這樣的操作符。優(yōu)化SQL語(yǔ)句（讓SQL語(yǔ)句更合理一些）。優(yōu)化數(shù)據(jù)庫(kù)字段類型。（能用其他的盡量不要用VCHAR）建立儲(chǔ)存過(guò)程。

打開(kāi)my.ini，如果是Linux服務(wù)器，那就是my.conf；然后在[mysqld]選項(xiàng)下面添加：skip-name-resolve 這個(gè)選項(xiàng)的意思是：禁用DNS解析，連接速度會(huì)快很多。

新聞名稱：php查詢上萬(wàn)條數(shù)據(jù) 用php查詢數(shù)據(jù)庫(kù)信息
文章路徑：http://m.rwnh.cn/article40/deohcho.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供軟件開(kāi)發(fā)、移動(dòng)網(wǎng)站建設(shè)、用戶體驗(yàn)、網(wǎng)站排名、全網(wǎng)營(yíng)銷推廣、品牌網(wǎng)站建設(shè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)