首頁  >  文章  >  後端開發  >  PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

藏色散人
藏色散人原創
2018-08-25 11:46:422512瀏覽

在近期內,相信大家在微博上或朋友圈內都有被房租暴漲以及我愛我家副總裁在朋友圈發布辭職信宣布辭職、網曝鍊家自如哄抬房價等等的相關事件刷屏過。對於房租上漲之後,受影響最大的當屬年輕人了。大部分年輕人或剛畢業無存款,或是工作幾年卻因高房價而繼續為租房奔波,如今連租房都成了一大難事。那麼身為PHP程式設計師,以下就此事件為大家介紹如何用PHP寫爬蟲來取得真實的租屋數據。

PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

這裡針對北京租屋市場來說,如果你想租房子主要有這麼三種方式:1、找房屋仲介公司目前市場佔有率最高的公司,名叫鏈家;2、找長租公寓目前市佔率最高的,名叫自如;3、上找房平台目前市佔率最高的,第一是安居客。而今年4月有一家新上線的公司,異軍突起極速竄到了前五位,名叫貝殼找房;這三種方式加起來幾乎決定著你我租房的價格而更讓人驚訝的是上述幾家公司,除了安居客以外鏈家、自如、貝殼找房他們的實際控制人是同一個人這就是這幾天頻繁出現在新聞中的鍊家集團的老闆左暉。

PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

對準備在北京打拼的人來說,房租暴漲是件相當氣憤的事。有些網友就用程式設計師的方式扒了扒房租上漲背後的事。那什麼是程式設計師的方式呢?

其中的程式想法就是:用php寫一個爬蟲用它爬取了一下鏈家的資料。首先去控制台看載入信息,找到相關數據api,按照請求頭裡面的所需參數,發送https請求,分析完成後使用xpath或者正則表達式工具去匹配你想要的內容,然後插入數據庫中,即可完成抓取。最後PHP實作爬蟲爬取到了鍊家網路上所有待租的房子。

PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

接著繼續同樣用爬蟲的方式爬取自如、蛋殼、蘑菇公寓等長租公寓平台最後得出的數據詞雲圖是這樣的

PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

根據數據總結,在北京租房行業的幾個主要方向上左老闆的產業要么佔據了龍頭地位要么正在飛速增長這也難怪前幾天有一條重量級的新聞說原來的我愛我家副總裁胡景暉因為受到了某些壓力辭職並炮轟自如、蛋殼等長租公寓以高出市場價20%-40%的價格爭搶房源完全不計成本地進行擴張。

PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據

商人逐利是無可厚非的而追求更大的市場佔有率也是正常的商業目標只是當某一個企業過於強大時會形成壟斷或者寡頭而一旦形成壟斷它們就可以利用資源和資本優勢進行囤積居奇、左右甚至操縱這個行業的走向而在北京的租房行業這樣的壟斷似乎正在形成。這裡也主要是想告訴大家PHP爬蟲能夠從網路上取得網頁、圖片、腳本、檔案資料等等的網路資源。


#

以上是PHP程式設計師使用爬蟲技術揭露房租上漲背後的真實數據的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn