Monthly Archives: 十一月 2019

十一 25

nodejs模块request的官方文档

Posted on by

提示：自动翻译的nodejs模块request的官方文档，大致的改了一些，但是可能还有一些地方不是原文的意思，或者不像人话的地方，所以还需要对照一下原文，原文地址在最下方。

超级简单易用

请求被设计为进行http调用的最简单方法。它支持HTTPS，默认情况下遵循重定向。

0
1
2
3
4
5
const request = require('request');
request('http://www.google.com', function (error, response, body) {
  console.error('error:', error); // Print the error if one occurred
  console.log('statusCode:', response && response.statusCode); // Print the response status code if a response was received
  console.log('body:', body); // Print the HTML for the Google homepage.
});

目录 Continue reading →

十一 22

为nodejs模块PhantomJS配置代理

Posted on by

为nodejs模块PhantomJS配置代理

PhantomJS模块配置代理方案一：

0
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
phantom.create(["--proxy=201.172.242.184:15124", "--proxy-type=socks5"])
  .then((instance) => {
    phInstance = instance;
    return instance.createPage();
  })
  .then((page) => {
    sitepage = page;
    return page.open('http://newsdaily.online');
  })
  .then((status) => {
    console.log(status);
    return sitepage.property('title');
  })
  .then((content) => {
    console.log(content);
    sitepage.close();
    phInstance.exit();
  })
  .catch((error) => {
    console.log(error);
    phInstance.exit();
  });

PhantomJS模块配置代理方案二： Continue reading →

十一 22

使用nodejs模块PhantomJS制作爬虫之我们必须要懂的

Posted on by

使用nodejs模块PhantomJS进行页面自动化，因为PhantomJS可以加载和操纵网页，所以执行各种页面自动化任务是完美的。

DOM操作

由于脚本的执行就像在Web浏览器上运行一样，因此标准的DOM脚本和CSS选择器可以正常工作。

以下useragent.js示例演示如何读取id为textContent的元素的属性：qua Continue reading →

十一 22

nodejs模块 – phantomjs的简单爬虫应用实例

Posted on by

nodejs模块 – phantomjs的简单爬虫应用实例

PhantomJS是一个可以用JavaScript编写脚本的无头web浏览器。它可以在Windows、macOS、Linux和FreeBSD上运行。
它使用QtWebKit作为后端，为各种web标准(DOM处理、CSS选择器、JSON、Canvas和SVG)提供快速和本机支持。

安装phantomjs

0
npm i phantom --save-dev

安装Cheerio, Cheerio是一个服务器端基本实现Jquery核心功能的一个库

0
npm i cheerio --save-dev

Continue reading →

十一 21

Request模块让 Node.js http请求变得简单

Posted on by

Node.js的模块——request。有了这个模块，http请求变的超简单。

使用超简单

Request使用超简单，同时支持https和重定向。

0
1
2
3
4
5
6
var request = require('request');
request('http://www.google.com', function (error, response, body) {
  if (!error && response.statusCode == 200) {
    console.log(body) // 打印google首页
  }
})
 

流

任何响应都可以输出到文件流。 Continue reading →

十一 19

thinkphp5.x nginx服务器伪静态配置方法

Posted on by

thinkphp5.x nginx服务器伪静态配置方法

0
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
server {
    listen 80;
    server_name **.com;
    root "C:/wwwroot/**/public";
    location / {
        index index.html index.htm index.php default.php;
 
//重点就是加入下面这个if
        if (!-e $request_filename){
            rewrite  ^(.*)$  /index.php?s=$1  last;
            break;
        }
    }
    location ~ .php(.*)$ {
        fastcgi_pass 127.0.0.1:18158;
        fastcgi_index index.html;
        fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
        fastcgi_split_path_info ^(.+.php)(.*)$;
        fastcgi_param PATH_INFO $fastcgi_path_info;
        include fastcgi_params;
    }
}

 

十一 18

ThinkJS模型实例化简单应用

Posted on by

ThinkJS的文档只是粗略的看了一遍，具体使用还得到项目实践中来研究。

说一说它的模型实例化，刚开始的时候没弄明白它的机制。

环境：

ThinkJS version: 3.2.10

多模块目录：

0
1
2
3
4
5
6
7
8
9
10
11
12
13
14
|...
|-- src
|    |-- ...
|    |-- home
|    |    |-- ...
|    |    |-- controller
|    |    |    |-- ...
|    |    |    |-- index.js
|    |    |    |-- ...
|    |    |-- model
|    |    |    |-- ...
|    |    |    |-- user.js
|    |    |    |-- ...
|    |-- ...
|...

Continue reading →

十一 17

HTTP、TCP/IP、UDP、Socket、Socket长连接、Socket连接池

Posted on by

前言

​ 作为一名开发人员我们经常会听到HTTP协议、TCP/IP协议、UDP协议、Socket、Socket长连接、Socket连接池等字眼，然而它们之间的关系、区别及原理并不是所有人都能理解清楚，这篇文章就从网络协议基础开始到Socket连接池，一步一步解释他们之间的关系。

七层网络模型

​ 首先从网络通信的分层模型讲起：七层模型，亦称OSI(Open System Interconnection)模型。自下往上分为：物理层、数据链路层、网络层、传输层、会话层、表示层和应用层。所有有关通信的都离不开它，下面这张图片介绍了各层所对应的一些协议和硬件

119190082-5aba3da90a5aa

通过上图，我知道IP协议对应于网络层，TCP、UDP协议对应于传输层，而HTTP协议对应于应用层，OSI并没有Socket，那什么是Socket，后面我们将结合代码具体详细介绍。 Continue reading →

十一 15

ThinkJS 3.0的安装及thinkjs命令的简单使用

Posted on by

ThinkJS 3.0

安装 ThinkJS 命令

0
$ npm install -g think-cli

如果安装很慢的话，可以尝试使用 taobao 的源进行安装。具体如下：

0
npm install -g think-cli --registry=https://registry.npm.taobao.org --verbose

卸载旧版本命令

0
$ npm uninstall -g thinkjs

创建项目

执行 thinkjs new [project_name] 来创建项目(单模块)，如： Continue reading →