Octoparse

Апісанне

Octoparse - гэта бясплатнае кліенцкае праграмнае забеспячэнне Windows для збору вэб-сайтаў, якое ператварае неструктураваныя або паўструктураваныя даныя з вэб-сайтаў у структураваныя наборы даных без неабходнасці кадавання.

Гэта просты ў выкарыстанні інструмент для збору даных з Інтэрнэту. Сканеры, якія працуюць у Octoparse, вызначаюцца наладжанымі правіламі здабывання. Правіла вымання падкажа Octoparse: які вэб-сайт павінен быць адкрыты; дзе знаходзяцца дадзеныя, якія вы плануеце сканаваць. забяспечвае высокую хуткасць збору дадзеных, выконваючы да 10 адначасовых патокаў.

Будучы дадаткам для Windows, Octoparse добра працуе для статычных і дынамічных вэб-сайтаў, у тым ліку для тых, чые вэб-старонкі выкарыстоўваюць Ajax. Існуюць розныя фарматы экспарту на ваш выбар, такія як CSV, EXCEL, HTML, TXT і базы дадзеных (MySQL, SQL Server і Oracle). Octoparse імітуе працу чалавека па ўзаемадзеянні з вэб-старонкамі.

Яе выдатныя функцыі, такія як запаўненне формаў, увод пошукавага тэрміна ў тэкставае поле, палегчаць здабычу вэб-дадзеных. Вы можаце запусціць свой праект здабычы альбо на ўласных машынах (лакальная здабыча), альбо ў воблаку (воблачная здабыча).

Octoparse забяспечвае візуальную панэль аперацый, якая вельмі зручная і простая. Octoparse імітуе паводзіны чалавека пры праглядзе вэб-старонак, такія як адкрыццё вэб-старонкі, уваход ва ўліковы запіс, увод тэксту, навядзенне і пстрычка вэб-элемента. Проста пстрыкніце інфармацыю на вэб-сайце ва ўбудаваным браўзеры і выканайце выманне, вы атрымаеце неабходныя структураваныя даныя.

Адначасовае сканіраванне Інтэрнэту ў вялікіх маштабах на аснове размеркаваных вылічэнняў з'яўляецца самай магутнай функцыяй Octoparse. Пасля таго, як вы загрузіце праект канфігурацыі ў воблака, вы можаце выканаць выманне адначасова, выкарыстоўваючы мноства хмарных сервераў. Калі вам трэба ачысціць 10 000 вэб-старонак за кароткі час, то воблачны сэрвіс Octoparse падыдзе лепш за ўсё.