Home  >  Article  >  Web Front-end  >  Graphic and text code introduction to the knowledge of moving tools implemented by Nodejs

Graphic and text code introduction to the knowledge of moving tools implemented by Nodejs

黄舟
黄舟Original
2017-07-24 15:56:531327browse

这篇文章 主要学习这两个模块的使用:

request-promise-native : 
cheerio :
 

nodejs有个request模块,专门处理这些网络请求方面的。 就像.NET也有request,webclient,httpclient啥的。。。

nodejs的request使用方法在这,自己查一下: 

而我喜欢用async和await的写法,因此我还引入了request-promise-native 模块,   ,这个就相当于.NET中httpclient吧。

好了背景就讲这么多,我们就开始简单的使用request-promise-native,进行模拟提交。

我用淘宝镜像安装模块,会比较快比较快一些,注册淘宝镜像方式:

npm install -g cnpm --registry=

然安装模块:

cnpm install --save request
cnpm install --save request-promise-native

 

我们登陆后 ,尝试发一篇文章,然我们分析一下提交的东西:

主要是 Cookie以及 FormData。

好了,然后我们写一个 cnblogs,来处理提交,代码:

const request = require('request-promise-native');
// const proxy = 'http://127.0.0.1:8888';
const url = 'https://i.cnblogs.com/EditPosts.aspx?opt=1';
class Cnblogs {
  static async save({ title, content, postdate }) {
    let response = await request({
      url: url,
      method: 'POST',
      headers: {
        Cookie: '[隐私隐私隐私]',
      },
      form: {
        __VIEWSTATE: '===========',
        __VIEWSTATEGENERATOR: 'FE27D343',
        Editor$Edit$txbTitle: title,
        Editor$Edit$EditorBody: `<p style="color: red; font-weight: bold;">原文发布时间为:${postdate} —— 来源于本人的百度文章 [由搬家工具导入]</p>${content}`,
        Editor$Edit$APOptions$Advancedpanel1$cklCategories$0: &#39;1031596&#39;,
        Editor$Edit$Advanced$ckbPublished: &#39;on&#39;,
        Editor$Edit$Advanced$chkDisplayHomePage: &#39;on&#39;,
        Editor$Edit$Advanced$chkComments: &#39;on&#39;,
        Editor$Edit$Advanced$chkMainSyndication: &#39;on&#39;,
        Editor$Edit$lkbPost: &#39;发布&#39;
      }
    });
    return response;
  }
}

module.exports = Cnblogs;
嗯,我们建立一个 app.js 调用一下测试吧:
const cnblogs = require(&#39;./cnblogs&#39;);

const main = async () => {
  try {
    let response = await cnblogs.save(&#39;测试&#39;,&#39;测试内容&#39;,&#39;2018-01-01&#39;);
    console.log(response);
  } catch (err) {
    console.error(&#39;[ERROR]&#39;, err);
  }
};

main();
执行node app,我们发现, 导入成功了。。。。
我用类似的方法 从自己百度文章抓取文章,然后调用 cnblogs.save(); 进行导入:

 

抓取文章也是很简单的,为了方便从response查找dom,我们可以用这个模块 cheerio :  , 就类似于我们做.NET的时候会用 HtmlAgilityPack 来查找dom一样。

cheerio 可以去看看,他的语法跟jquery一样,使用起来很方便。

The above is the detailed content of Graphic and text code introduction to the knowledge of moving tools implemented by Nodejs. For more information, please follow other related articles on the PHP Chinese website!

Statement:
The content of this article is voluntarily contributed by netizens, and the copyright belongs to the original author. This site does not assume corresponding legal responsibility. If you find any content suspected of plagiarism or infringement, please contact admin@php.cn