Octoparse

Octoparse ile web sitelerine crawler yollayıp veri ayrıştırması yapabilirsiniz.

Hakan Özalan - 6 YIL ÖNCE GÜNCELLENDİ

Octoparse programı web örümceği (web crawler) araçlarını içerisinde barındıran çok verimli bir yazılımdır.

Octoparse ile kodlama yapmaya gerek olmadan web crawler oluşturup; web sitelerindeki verileri toplayabilirsiniz. Örneğin; Tek seferde IMDB sitesindeki binlerce filmin IMDB puanını, yönetmenini, oyuncularını ve dizinin özet bilgisi gibi pek çok bilgiyi alıp bu veriler ile kendi veri setinizi oluşturabilirsiniz. Octoparse programındaki arayüz sayesinde ufak bir eğitim sürecinden geçip, işinizi kolaylaştıracak ayrıştırma işlemlerini yapmaya başlayabilirsiniz.

Uygulama içerisinde bazı örnek kullanım senaryoları hazır olarak geliyor, örnek olması açısından bunları inceleyebilirsiniz. Bazı örnekler:

Bir Instagram hashtagindeki tüm resimleri, beğenilme ve yorum sayılarını içerecek şekilde toplayıp dışa aktarılması.

Twitter'da arama yapıp; arama sonuçlarındaki tweet metini, kullanıcı adı, resimi, beğenilme ve retweet sayılarını toplayıp dışa aktarımı.

Daha karışık kombinasyonlar da yapılabiliyor.

Örneğin, Ekşi Sözlük'te gündem olan başlıkları listeleyip, başlıklara tek tek girip başlıklardaki bütün entryleri yazar bilgileri ile birlikte toplayıp dışarı aktarmak gibi.

Gerisi sizin yaratıcılığınıza kalmış.

Ücretsiz kullanımında bazı limitlemeleri olmasına rağmen, işinizi görecek kadar fazla işlem yapabiliyorsunuz.