搜尋

首頁  >  問答  >  主體

网页爬虫 - python3爬链家utf8页面,中文全部是“南京小区二手房(南京链家网)”

迷茫迷茫2803 天前1831

全部回覆(2)我來回復

  • 阿神

    阿神2017-04-18 10:00:42

    # -*- coding: utf-8 -*-
    
    
    import requests
    from bs4 import BeautifulSoup
    
    url = 'http://nj.lianjia.com/xiaoqu/'
    html = requests.get(url)
    soup = BeautifulSoup(html.text.encode(html.encoding), 'lxml', from_encoding='utf-8')
    title = soup.title.get_text()
    print(title)
    

    1) 加 # -- coding: utf-8 --聲明
    2) 正確的處理返回的response的編碼

    回覆
    0
  • 高洛峰

    高洛峰2017-04-18 10:00:42

    樓上沒錯,其實你也可以用Latin1編碼來解碼這段文字。

    import requests
    from bs4 import BeautifulSoup
    
    url = 'http://nj.lianjia.com/xiaoqu/'
    html = requests.get(url)
    soup = BeautifulSoup(html.text, 'lxml')
    title = soup.title.get_text()
    print(title.encode('latin1').decode('utf-8'))

    回覆
    0
  • 取消回覆