Huge News!Announcing our $40M Series B led by Abstract Ventures.Learn More →
Socket
Sign inDemoInstall
Socket
Sign inDemoInstall

@prohetamine/proxy-checker

Package Overview
Dependencies
Maintainers
1
Versions
13
Alerts
File Explorer

Advanced tools

License
Socket logo

Install Socket

Detect and block malicious and high-risk dependencies

Install

@prohetamine/proxy-checker

Proxy parser & proxy checker

  • 1.0.6
  • Source
  • npm
  • Socket score
Version published
Weekly downloads
0
decreased by-100%
Maintainers
1
Weekly downloads
 
Created
Source

enter image description here

lang: ru en

proxy-checker

proxy-checker - Максимально универсальный прокси-парсер и прокси-чекер.

Почему ?

Мне, а значит и многим необходимо получать прокси для обхода бана по IP при большом количестве запросов. Этот модуль позволяет выполнять практически все задачи связанные с подготовкой прокси. Мне, а значит многим требуется собирать прокси индивидуально для некоторых сайтов, я также позаботился об этом. Надеюсь мой вклад облегчит кому-то жизнь.

С чего начать

Установим npm модуль @prohetamine/proxy-checker

$ npm install @prohetamine/proxy-checker

или

$ yarn add @prohetamine/proxy-checker

Примеры и описание

Подключение модуля

const proxy = require('@prohetamine/proxy-checker')
load

Функция load собирает прокси и легко их отдает через all и random.

object
ключзначениезначение по-умолчаниюобязательныйинформация
portnumberfalseнетиспользуется для фильтра портов
debugbooleanfalseнетиспользуется для отладки
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const count = await proxy.load({
    port: 8888,
    debug: true
  })

  console.log(count) // Количество собранных прокси с портом 8888
})()
loadInterval

Функция load собирает прокси с интервалом в N миллисекунд и легко их отдает через all и random.

параметрызначение по-умолчаниюинформация
function() => {}функция обратного вызова возвращающая в единственном аргументе количество загруженных IP
int5000интервал в миллисекундах
object{ started, port, debug }дополнительные опции
object
ключзначениезначение по-умолчаниюобязательныйинформация
startedbooleanfalseнетиспользуется для мгновенной загрузки
portbooleanfalseнетиспользуется для фильтра портов
debugbooleanfalseнетиспользуется для отладки
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const kill = await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Количество собранных прокси с портом 8080
  }, 60000, { started: true, debug: false, port: 8080 })

  console.log(proxy.all({ port: 8888 })) // Все загруженные IP адреса с портом 8888
  console.log(proxy.random({ port: 80 })) // Один случайный IP адрес с портом 80

  setInterval(() => {
    if (proxy.all().length > 1488) {
      console.log(proxy.all())
      kill() // убивает текущий loadInterval
    }
  }, 5000)
})()
all

Функция all возвращает массив IP адресов когда он загружен load или loadInterval и false когда загрузка еще не произошла.

object
ключзначениезначение по-умолчаниюобязательныйинформация
portnumberfalseнетиспользуется для фильтра портов
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const count = await proxy.load({
    debug: true
  })

  console.log(proxy.all({ port: 1488 })) // Все загруженные IP адреса с портом 1488
})()
random

Функция random возвращает один случайный IP адрес когда он загружен load или loadInterval и false когда загрузка еще не произошла.

object
ключзначениезначение по-умолчаниюобязательныйинформация
portnumberfalseнетиспользуется для фильтра портов
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const count = await proxy.load({
    debug: true
  })

  console.log(proxy.random({ port: 8888 })) // Один случайный IP адрес с портом 8888
})()
checkerInterval

Функция checkerInterval чекает прокси с интервалом в N миллисекунд для определенного сайта и легко их отдает через get.all и get.random.

параметрызначение по-умолчаниюинформация
stringnullуникальный идентификатор
object{ url, isBrowser, debugBrowser, timeout, stream, debug, indicators, session }дополнительные опции
object
ключзначениезначение по-умолчаниюобязательныйинформация
urlstringnullнетссылка на сайт
isBrowserbooleanfalseнетиспользуется для проверки через браузер
trashIgnorebooleanfalseнетиспользуется для оптимизации, убирает загрузку media, xhr, fetch, websocket, manifest, image, stylesheet, font, script
debugBrowserbooleanfalseнетиспользуется для отладки выключает headless у puppeteer
timeoutint10000нетинтервал в миллисекундах
streamint2нетколичество одновременных потоков
debugbooleanfalseнетиспользуется для отладки
indicatorsarray[]нетиндикаторы правильно загруженных данных
sessionstringfalseнетпуть для сохранения валидных IP после завершения или сохранения
array[object]
ключзначениезначение по-умолчаниюобязательныйинформация
keywordstringнетдаиспользуется для поиска на странице по ключевому слову
selectorstringнетдаиспользуется для поиска на странице по дом ноде
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Количество собранных прокси
  }, 60000, { started: true, debug: false })

  const { key, kill, save } = await proxy.checkerInterval('chaturbate', {
    url: 'https://chaturbate.com/diana_smiley/',
    isBrowser: true,
    trashIgnore: true,
    debugBrowser: false,
    timeout: 60000,
    stream: 10,
    session: __dirname + '/chaturbate.json',
    debug: true,
    indicators: [{
      //keyword: 'close_entrance_terms',
      selector: '#close_entrance_terms'
    }] // Перечислите другие показатели в объектах если они требуются
  })

  setInterval(() => {
    const proxys = proxy.get(key).all()
    console.clear()
    console.log(proxys, proxys && proxys.length)

    if (proxys.length > 20) {
      kill() // убивает текущий checkerInterval и сохраняет сессию
      save() // только сохраняет сессию
    }
  }, 3000)
})()

const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Количество собранных прокси с портом
  }, 60000, { started: true, debug: false })

  const keyName = null // Уникальный идентификатор для аккумуляции IP, если установлено значение null, будет сгенерировано автоматически

  const { key, kill, save } = await proxy.checkerInterval(keyName, {
    url: 'https://github.com/prohetamine',
    timeout: 30000,
    stream: 20,
    session: __dirname + '/github.json',
    debug: true,
    indicators: [{
      keyword: 'Prohetamine',
      //selector: '#close_entrance_terms'
    }, {
      keyword: 'Stas'
    }] // Перечислите другие показатели в объектах если они требуются
  })

  setInterval(() => {
    const proxys = proxy.get(key).all()
    console.clear()
    console.log(proxys, proxys && proxys.length)

    if (proxys.length > 20) {
      kill() // убивает текущий checkerInterval и сохраняет сессию
      save() // только сохраняет сессию
    }
  }, 3000)
})()
get.all

Функция get.all возвращает массив прочеканых checkerInterval IP адресов по уникальному идентификатору и false когда загрузка еще не произошла.

get(key)
параметрызначение по-умолчаниюобязательныйинформация
stringnullдауникальный идентификатор
object
ключзначениезначение по-умолчаниюобязательныйинформация
portnumberfalseнетиспользуется для фильтра портов
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Количество собранных прокси
  }, 60000, { started: true, debug: false })

  const { key, kill, save } = await proxy.checkerInterval('chaturbate', {
    url: 'https://chaturbate.com/diana_smiley/',
    isBrowser: true,
    debugBrowser: false,
    timeout: 60000,
    stream: 10,
    session: __dirname + '/chaturbate.json',
    debug: true,
    indicators: [{
      //keyword: 'close_entrance_terms',
      selector: '#close_entrance_terms'
    }] // Перечислите другие показатели в объектах если они требуются
  })

  setInterval(() => {
    const proxys = proxy.get(key).all()
    console.clear()
    console.log(proxys, proxys && proxys.length)

    if (proxys.length > 20) {
      kill() // убивает текущий checkerInterval и сохраняет сессию
      save() // только сохраняет сессию
    }
  }, 3000)
})()
get.random

Функция get.random возвращает один случайный из прочеканых checkerInterval IP адресов по уникальному идентификатору и false когда загрузка еще не произошла.

get(key)
параметрызначение по-умолчаниюобязательныйинформация
stringnullдауникальный идентификатор
object
ключзначениезначение по-умолчаниюобязательныйинформация
portnumberfalseнетиспользуется для фильтра портов
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Количество собранных прокси
  }, 60000, { started: true, debug: false })

  const { key, kill, save } = await proxy.checkerInterval('chaturbate', {
    url: 'https://chaturbate.com/diana_smiley/',
    isBrowser: true,
    debugBrowser: false,
    timeout: 60000,
    stream: 10,
    session: __dirname + '/chaturbate.json',
    debug: true,
    indicators: [{
      //keyword: 'close_entrance_terms',
      selector: '#close_entrance_terms'
    }] // Перечислите другие показатели в объектах если они требуются
  })

  setInterval(() => {
    console.log(proxy.get(key).random())
  }, 3000)
})()

Другие примеры

больше...

Контакты

Мой Телеграм: @prohetamine, канал

Почта: prohetamine@gmail.com

Донат денег: patreon

Если у вас есть какие-либо вопросы и/или предложения, пожалуйста, напишите мне в телеграмме, если вы найдете ошибки также дайте мне знать, я буду очень благодарен.

-------- OTHER WORLD --------

lang: ru en

proxy-checker

proxy-checker - The most versatile proxy parser and proxy checker.

Why ?

I, and therefore many people, need to get a proxy to bypass the ban on IP with a large number of requests. This module allows you to perform almost all tasks related to proxy preparation. I, and therefore many people, need to build proxies individually for some sites, I also took care of this. I hope my contribution will make it easier for someone life.

Get started

Install the npm module @prohetamine/proxy-checker

$ npm install @prohetamine/proxy-checker

or

$ yarn add @prohetamine/proxy-checker

Examples and description

Connecting the module

const proxy = require('@prohetamine/proxy-checker')
load

The load function collects proxies and easily returns them via all and random.

object
keyvaluedefault valuerequiredinformation
portnumberfalsenoneused for the port filter
debugbooleanfalsenoneused for debugging
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const count = await proxy.load({
    port: 8888,
    debug: true
  })

  console.log(count) // Number of collected proxies with port 8888
})()
loadInterval

The load function collects proxies with an interval of N milliseconds and easily returns them via all and random.

optionsdefaultinfo
function() => { /* ... */}callback function returns in a single argument the number of IP loaded
int5000interval in milliseconds
object{ started, port, debug }additional options
object
keyvaluedefault valuemandatoryinformation
startedbooleanfalsenouse for instant download
portbooleanfalsenoused to filter ports
debugbooleanfalsenoneused for debugging
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const kill = await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Number of collected proxies with port 8080
  }, 60000, { started: true, debug: false, port: 8080 })

  console.log(proxy.all({ port: 8888 })) // All downloaded IP addresses with port 8888
  console.log(proxy.random({ port: 80 })) // One random IP address with port 80

  setInterval(() => {
    if (proxy.all().length > 1488) {
      console.log(proxy.all())
      kill() // kills the current loadInterval
    }
  }, 5000)
})()
all

The all function returns an array of IP addresses when it is loaded load or loadInterval and false when the load has not yet occurred.

object
keyvaluedefault valuerequiredinformation
portnumberfalsenoneused for the port filter
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const count = await proxy.load({
    debug: true
  })

  console.log(proxy.all({ port: 1488 })) // All downloaded IP addresses with port 1488
})()
random

The random function returns a single random IP address when it is loaded load or loadInterval and false when the load has not yet occurred.

object
keyvaluedefault valuerequiredinformation
portnumberfalsenoneused for the port filter
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  const count = await proxy.load({
    debug: true
  })

  console.log(proxy.random({ port: 8888 })) // One random IP address with port 8888
})()
checkerInterval

The checkerInterval function checks proxies with an interval of N milliseconds for a specific site and easily returns them via get.all and get.random.

parametersdefault valueinformation
stringnullunique identifier
object{ url, isBrowser, debugBrowser, timeout, stream, debug, indicators, session}additional options
object
keyvaluedefault valuemandatoryinformation
urlstringnullnowebsite link
isBrowserbooleanfalsenoneused for checking through the browser
trashIgnorebooleanfalsenoneused for optimization, removes loading of media, xhr, fetch, websocket, manifest, image, stylesheet, font, script
debugBrowserbooleanfalsenoneused for debugging disables headless in puppeteer
timeoutint10000noneinterval in milliseconds
streamint2nonenumber of concurrent threads
debugbooleanfalsenoneused for debugging
indicatorsarray[]noneindicators of correctly loaded data
sessionstringfalsenonepath to save valid IP addresses after completion or saving
array[object]
keyvaluedefault valuerequiredinformation
keywordstringnoyesused to search the page by keyword
selectorstringnoyesused for searching on a page by dom node
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Number of collected proxies
  }, 60000, { started: true, debug: false })

  const { key, kill, save } = await proxy.checkerInterval('chaturbate', {
    url: 'https://chaturbate.com/diana_smiley/',
    isBrowser: true,
    trashIgnore: true,
    debugBrowser: false,
    timeout: 60000,
    stream: 10,
    session: __dirname + '/chaturbate.json',
    debug: true,
    indicators: [{
      //keyword: 'close_entrance_terms',
      selector: '#close_entrance_terms'
    }] // List other metrics in the objects if they are required
  })

  setInterval(() => {
    const proxys = proxy.get(key).all()
    console.clear()
    console.log(proxys, proxys && proxys.length)

    if (proxys.length > 20) {
      kill() // Kills the current checkerInterval and saves the session
      save() // Only saves the session
    }
  }, 3000)
})()

const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // The number of proxies collected with the port
  }, 60000, { started: true, debug: false })

  const keyName = null // A unique identifier for IP accumulation, if set to null, will be generated automatically.

  const { key, kill, save } = await proxy.checkerInterval(keyName, {
    url: 'https://github.com/prohetamine',
    timeout: 30000,
    stream: 20,
    session: __dirname + '/github.json',
    debug: true,
    indicators: [{
      keyword: 'Prohetamine',
      //selector: '#close_entrance_terms'
    }, {
      keyword: 'Stas'
    }] // List other metrics in the objects if they are required
  })

  setInterval(() => {
    const proxys = proxy.get(key).all()
    console.clear()
    console.log(proxys, proxys && proxys.length)

    if (proxys.length > 20) {
      kill() // Kills the current checkerInterval and saves the session
      save() // Only saves the session
    }
  }, 3000)
})()
get.all

The get.all function returns an array of checked checkerInterval IP addresses by a unique identifier and false when the download has not yet occurred.

get(key)
parametersdefault valuerequiredinformation
stringnullyesunique identifier
object
keyvaluedefault valuerequiredinformation
portnumberfalsenoneused for the port filter
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Number of collected proxies
  }, 60000, { started: true, debug: false })

  const { key, kill, save } = await proxy.checkerInterval('chaturbate', {
    url: 'https://chaturbate.com/diana_smiley/',
    isBrowser: true,
    debugBrowser: false,
    timeout: 60000,
    stream: 10,
    session: __dirname + '/chaturbate.json',
    debug: true,
    indicators: [{
      //keyword: 'close_entrance_terms',
      selector: '#close_entrance_terms'
    }] // List other metrics in the objects if they are required
  })

  setInterval(() => {
    const proxys = proxy.get(key).all()
    console.clear()
    console.log(proxys, proxys && proxys.length)

    if (proxys.length > 20) {
      kill() // Kills the current checkerInterval and saves the session
      save() // Only saves the session
    }
  }, 3000)
})()
get.random

The function get.random returns one random of the checked checkerInterval IP addresses by a unique identifier and false when the download has not yet occurred.

get(key)
parametersdefault valuerequiredinformation
stringnullyesunique identifier
object
keyvaluedefault valuerequiredinformation
portnumberfalsenoneused for the port filter
const proxy = require('@prohetamine/proxy-checker')

;(async () => {
  await proxy.loadInterval(count => {
    console.log(`count parse: ${count}`) // Number of collected proxies
  }, 60000, { started: true, debug: false })

  const { key, kill, save } = await proxy.checkerInterval('chaturbate', {
    url: 'https://chaturbate.com/diana_smiley/',
    isBrowser: true,
    debugBrowser: false,
    timeout: 60000,
    stream: 10,
    session: __dirname + '/chaturbate.json',
    debug: true,
    indicators: [{
      //keyword: 'close_entrance_terms',
      selector: '#close_entrance_terms'
    }] // List other metrics in the objects if they are required
  })

  setInterval(() => {
    console.log(proxy.get(key).random())
  }, 3000)
})()

Other examples

more...

Contacts

My Telegram: @prohetamine, channel

Email: prohetamine@gmail.com

Donat money: patreon

If you have any questions and/or suggestions, please email me in telegram, if you find any bugs also let me know, I will be very grateful.

Keywords

FAQs

Package last updated on 09 Jun 2021

Did you know?

Socket

Socket for GitHub automatically highlights issues in each pull request and monitors the health of all your open source dependencies. Discover the contents of your packages and block harmful activity before you install or update your dependencies.

Install

Related posts

Inside the Business of Ransomware: Insights from Reddit AMA with Ransomware Negotiators

Security News

Inside the Business of Ransomware: Insights from Reddit AMA with Ransomware Negotiators

Ransomware negotiators share how modern cybercriminals operate like corporations, using specialized teams, negotiation tactics, and reputation management.

By Sarah Gooding  -  Dec 17, 2024
SocketSocket SOC 2 Logo

Product

  • Package Alerts
  • Integrations
  • Docs
  • Pricing
  • FAQ
  • Roadmap
  • Changelog

About

Packages

npm

Go

Maven

PyPI

Rubygems

Stay in touch

Get open source security insights delivered straight into your inbox.

  • Terms
  • Privacy
  • Security

Made with ⚡️ by Socket Inc