Как установить прокси-сервер в phantomjs

Ответ 1

{ parameters: { 'proxy': 'socks://98.239.198.83:21320' } }

Они не обновили свои документы.

Ответ 2

Как для версии phantom 2.0.10, следующий код работает очень хорошо в моей машине Windows

  phantom.create(["--proxy=201.172.242.184:15124", "--proxy-type=socks5"])
      .then((instance) => {
          phInstance = instance;
          return instance.createPage();
      })
      .then((page) => {
          sitepage = page;
          return page.open('http://newsdaily.online');
      })
      .then((status) => {
          console.log(status);
          return sitepage.property('title');
      })
      .then((content) => {
          console.log(content);
          sitepage.close();
          phInstance.exit();
      })
      .catch((error) => {
          console.log(error);
          phInstance.exit();
      });

Ответ 3

В качестве побочного эффекта при попытке выяснить проблему на Github для phantomjs-nodejs я смог установить прокси следующим образом:

phantom = require 'phantom'
parameters = {
    loadimages: '--load-images=no',
    websecurity: '--web-security=no',
    ignoresslerrors: '--ignore-ssl-errors=yes',
    proxy: '--proxy=10.0.1.235:8118',
}
urls = {
    checktor: "https://check.torproject.org/",
    google: "https://google.com",
}

phantom.create parameters.websecurity, parameters.proxy, (ph) ->
  ph.createPage (page) ->
    page.open urls.checktor, (status) ->
      console.log "page opened? ", status
      page.evaluate (-> document.title), (result) ->
        console.log 'Page title is ' + result
        ph.exit()

Результат, когда прокси использует Tor, был:

открыта страница? Успех

Название страницы - Поздравляю. Этот браузер настроен на использование Tor.

Ответ 4

Время продолжается, поэтому PhantomJS теперь может устанавливать прокси "на лету" (даже на основе каждой страницы): см. эту фиксацию: https://github.com/ariya/phantomjs/commit/efd8dedfb574c15ddaac26ae72690fc2031e6749

Вот пример использования новой функции setProxy (я не нашел использование параметров веб-страницы, это общее использование прокси-сервера, например, phantom):

https://github.com/ariya/phantomjs/blob/master/examples/openurlwithproxy.js

Если вам нужен прокси-сервер на странице, используйте полный URL-адрес прокси (схема, имя пользователя, пароль, хост, порт - все это URL-адрес)

Ответ 5

используйте пакет phantom npm и пакет co npm.

co(function*() {
  const phantomInstance = yield phantom.create(["--proxy=171.13.36.64:808"]);
  crawScheduler.start(phantomInstance);
});

Ответ 6

Пример CoffeeScript немного странный, потому что это browser, который передается в обратный вызов phantom.create, а не page, но в противном случае он должен быть совместимым, судя по code.

var phantom = require('phantom');
phantom.create({
    parameters: {
        proxy: '98.239.198.83:21320'
    }
}, function(browser){
    browser.createPage(function(page){
        page.open('http://example.com/req.php', function() {
            ...
        });
    });
});

Настройки прокси устанавливаются во время создания процесса, а не во время открытия страницы. Хотя PhantomJS содержит недокументированную функцию phantom.setProxy(), которая позволяет вам изменять настройки прокси-сервера в середине script. Модуль phantom также выглядит поддерживает его.

Ответ 7

Я запускаю PhantomJS из Windows cmd и синтаксис, который он использует, выглядит немного иначе, чем я заметил, если вы не указали http:// PJ не распознает значение, это полный пример

var page = require('webpage').create();
page.settings.loadImages = false;  //    
page.settings.proxy = 'http://192.168.1.5:8080' ; 
page.settings.userAgent = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/37.0.2062.120 Safari/537.36';
page.open('http://some.com/page', function() {
  page.render('some.png');
  phantom.exit();
});

Ответ 8

Еще одно решение для nodejs:

const phantomInstance = await require('phantom').create();
const page = await phantomInstance.createPage();

// get current settings:
var pageSettings = await page.property('settings');
/*
{
  XSSAuditingEnabled: false,
  javascriptCanCloseWindows: true,
  javascriptCanOpenWindows: true,
  javascriptEnabled: true,
  loadImages: true,
  localToRemoteUrlAccessEnabled: false,
  userAgent: 'Mozilla/5.0 (Unknown; Linux x86_64) ... PhantomJS/2.1.1 Safari/538.1',
  webSecurityEnabled: true
}
*/

pageSettings.proxy = 'https://78.40.87.18:808';

// update settings (return value is undefined):
await page.property('settings', pageSettings);

const status = await page.open('https://2ip.ru/');

// show IP:
var ip = await page.evaluate(function () {
    var el = document.getElementById('d_clip_button');
    return !el ? '?' : el.textContent;
});
console.log('IP:', ip);

Это возможность установить прокси на определенной странице.

Ответ 9

var phantom = require('phantom');
phantom.create(function (browser) {
    browser.setProxy(proxyIP, proxyPort);
    page.open(url, function (status) {
        console.log(status);
    });
},{dnodeOpts:{weak: false}});

он отлично работает на моих окнах.