如何在puppeteer中使用代理

本篇文章给大家分享的是有关如何在puppeteer中使用代理,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

背景

如何在puppeteer中使用代理

在使用puppeteer进行访问页面的时候,有时候需要用到代理。

环境: centos 7

chrome 安装

puppeteer使用chrome。 参考chrome的命令行使用方式。 在官网中没看到说明,不过一般的执行文件都是支持help的。 在服务器上安装chrome :

vim/etc/yum.repos.d/google-chrome.repo

添加内容

[google-chrome]
name=google-chrome
baseurl=http://dl.google.com/linux/chrome/rpm/stable/$basearch
enabled=1
gpgcheck=1
gpgkey=https://dl-ssl.google.com/linux/linux_signing_key.pub

安装浏览器

yum-yinstallgoogle-chrome-stable

说明: yum search chrome 可以查看供安装的包

chrome 命令行代理

在shell中执行命令:

google-chrome-h

即可看到所有的命令选项,其中 OPTION 下面有代理添加的介绍以及示例:

--proxy-server=host:port
SpecifytheHTTP/SOCKS4/SOCKS5proxyservertouseforrequests.
Thisoverridesanyenvironmentvariablesorsettingspickedvia
theoptionsdialog.Anindividualproxyserverisspecified
usingtheformat:

[<proxy-scheme>://]<proxy-host>[:<proxy-port>]

Where<proxy-scheme>istheprotocoloftheproxyserver,andis
oneof:

"http","socks","socks4","socks5".

Ifthe<proxy-scheme>isomitted,itdefaultsto"http".Also
notethat"socks"isequivalentto"socks5".

Examples:

--proxy-server="foopy:99"
UsetheHTTPproxy"foopy:99"toloadallURLs.

--proxy-server="socks://foobar:1080"
UsetheSOCKSv5proxy"foobar:1080"toloadallURLs.

--proxy-server="socks4://foobar:1080"
UsetheSOCKSv4proxy"foobar:1080"toloadallURLs.

--proxy-server="socks5://foobar:66"
UsetheSOCKSv5proxy"foobar:66"toloadallURLs.

Itisalsopossibletospecifyaseparateproxyserverfordif‐
ferentURLtypes,byprefixingtheproxyserverspecifierwitha
URLspecifier:

Example:

--proxy-server="https=proxy1:80;http=socks4://baz:1080"
Loadhttps://*URLsusingtheHTTPproxy"proxy1:80".And
loadhttp://*
URLsusingtheSOCKSv4proxy"baz:1080".


--no-proxy-server
Disablestheproxyserver.Overridesanyenvironmentvariables
orsettingspickedviatheoptionsdialog.


--proxy-auto-detect
Autodetectproxyconfiguration.Overridesanyenvironmentvari‐
ablesorsettingspickedviatheoptionsdialog.


--proxy-pac-url=URL
SpecifyproxyautoconfigurationURL.Overridesanyenvironment
variablesorsettingspickedviatheoptionsdialog.

其中 –proxy-server= 的值的格式是 [<proxy-scheme>://]<proxy-host>[:<proxy-port>]

其中 http 代理是不需要加 proxy-scheme ,以上的示例中显示 socks 代理是需要添加scheme。

比如:

在本机建立一个 socks5 代理服务器, 本地端口是 1088

复制代码 代码如下:

google-chrome --headless --disable-gpu --proxy-server="socks5://127.0.0.1:1088" --print-to-pdf https://www.chromestatus.com/

上面的示例中并没有 需要密码(用户)验证的。

puppeteer 添加代理

在以上命令行中, 代理 option 添加方式是:

--proxy-server="socks5://127.0.0.1:1088"

在 puppeteer 中,启动浏览器时添加代理:

复制代码 代码如下:

const browser = await puppeteer.launch({headless:true, args:['--no-sandbox','--proxy-server=socks5://127.0.0.1:1088']});

以上就是如何在puppeteer中使用代理,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注恰卡编程网行业资讯频道。

发布于 2021-03-26 01:49:27
收藏
分享
海报
0 条评论
175
上一篇:Maven Helper插件怎么在IDEA中使用 下一篇:怎么在微信小程序中使用picker view时间控件
目录

    0 条评论

    本站已关闭游客评论,请登录或者注册后再评论吧~

    忘记密码?

    图形验证码