ホームページ  >  に質問  >  本文

ruby - Nokogiri 抓取网页乱码如何解决?

最近在帮同学在一个网站上抓取一些东西,比如 http://www.sell001.com/110178 上面的服装图片,标题和价格等等。

这个网站有点奇怪,他 meta 里面没有声明 charset,然后我用 Nokogiri ,也没有指定特定的 encoding。

抓了一些图片和链接都是可以的,但是碰到有中文的情况时它就乱码了。

我看官方文档 http://www.nokogiri.org/tutorials/parsing_an_html_xml_document.html,
Nokogiri 可以指定 encoding,比如 doc = Nokogiri.XML('<foo><bar /><foo>', nil, 'EUC-JP')
我试了指定一些比如 gbk 等等,都无效。。

这种情况该如何解决?

巴扎黑巴扎黑2712日前710

全員に返信(1)返信します

  • 阿神

    阿神2017-04-22 09:02:21

    リーリー

    => #(ドキュメント:0x3fc3974355f4 {
    名前 = "ドキュメント",
    子供 = [
    #(DTD:0x3fc397424bf0 { name = "html" }),
    #(要素:0x3fc39741fc18 {
    名前 = "html",
    属性 = [
    #(属性:0x3fc39740fa20 {
    名前 = "xmlns",
    値 = "http://www.w3.org/1999/xhtml"
    })]、
    子供 = [
    #(テキスト「rn」),
    #(要素:0x3fc3973da190 {
    名前 = "頭"、
    子供 = [
    #(テキスト「rn」)、
    #(要素:0x3fc3973cf6dc {
    名前 = "タイトル",
    Children = [ #(Text "九天国际A218-网商园")]
    })、

    utf-8 通常解析。。。

    返事
    0
  • キャンセル返事