Veri çekme yazılımı, bir web sayfasında gözünüzle okuduğunuz bilgiyi sizin yerinize okuyup düzenli bir tabloya yazan programdır. Yeni bir bilgi üretmez; halka açık olarak zaten yayınlanmış olanı, insanın saatlerini alan bir hızda ve alan atlamadan toplar. Bu sayfada bu yazılımların nasıl çalıştığını, hangi işlerde gerçekten kazandırdığını ve nerede sınırlarına çarptığını abartısız anlatıyoruz.
Elle veri toplamanın maliyeti, harcanan süreden ibaret değil. Bir kişi yüz sayfayı gezip alan kopyalarken üç şey birden olur: yavaşlar, sıkılır ve hata yapar. Kırkıncı kayıttan sonra dikkat düşer; bir sütun boş bırakılır, bir fiyat yanlış hücreye yazılır, bir kayıt iki kez girilir. Sonuçta elinizde bir tablo olur ama o tabloya güvenemezsiniz — ve güvenemediğiniz veriyle karar veremezsiniz. Veri çekme yazılımının asıl değeri hızda değil, buradadır: aynı kuralı bininci kayıtta da birinci kayıttaki özenle uygular. Yorulmaz, acele etmez, sütun atlamaz. Bir saatte kırk kayıt yerine yüzlerce kayıt işlemesi ikinci faydadır; birincisi tablonun tutarlı olmasıdır. Ekipte bu işi yapan kişinin zamanı da serbest kalır ve genellikle o zaman müşteriyle konuşmaya gider — ki o iş yazılıma devredilemez.
Veri çekme iki farklı yoldan yapılır ve bu ayrım pratikte çok şey değiştirir. Birincisi API kullanımıdır: platform size resmî bir kapı açar, siz de o kapıdan yapılandırılmış veri alırsınız. Temizdir, hızlıdır, ama çoğu platform ya böyle bir kapı sunmaz ya da çok sınırlı sunar. İkincisi tarayıcı otomasyonudur: yazılım gerçek bir tarayıcı açar, sayfayı sizin gördüğünüz gibi yükler ve ekranda görünen alanları okur. Lastmedia botları ikinci yolu kullanır. Bunun avantajı, API’si olmayan her sayfada çalışabilmesidir. Bedeli ise sayfanın tasarımına bağımlı olmasıdır: site arayüzünü değiştirdiğinde okuma kuralları da güncellenmek zorundadır. Bu yüzden ciddi bir veri çekme yazılımı satın alırken sorulacak ilk soru fiyat değil, “arayüz değişince ne oluyor” sorusudur. Bizim cevabımız: uyum yaması yayınlanır, abonelik boyunca ücretsizdir; ama değişimin fark edilmesiyle yamanın çıkması arasında kısa bir pencere olabilir.
Bir veri çekme yazılımını değerli kılan şey topladığı satır sayısı değil, o satırların kullanılabilir olmasıdır. Fiyat alanı “1.250.000 TL” diye metin olarak yazılırsa o sütunla ortalama alamazsınız; sayı olarak yazılması gerekir. Tarih alanı metin kalırsa sıralayamazsınız. Kilometre alanında birim karışırsa karşılaştırma anlamsızlaşır. Bizim çıktımızda sayılar sayı, tarihler tarih olarak yazılır; böylece dosyayı açıp doğrudan pivot tablo kurabilir, filtre uygulayabilir veya grafik çıkarabilirsiniz. Excel (.xlsx) ve CSV desteklenir. Dosya adını ve klasör düzenini siz belirlersiniz, bu yüzden çıktı mevcut raporlama akışınıza doğrudan bağlanır; araya ayrı bir temizleme adımı koymanız gerekmez. Tekrarlanan taramalar biriktiğinde elinizde bir zaman serisi oluşur ve “şu an ne durumda” sorusunun yanında “nereye gidiyor” sorusunu da cevaplayabilirsiniz.
Veri çekme yazılımı her işte aynı ölçüde işe yaramaz. En net kazanç, aynı bilgiyi düzenli aralıklarla, çok sayıda kaynaktan toplamanız gereken işlerde ortaya çıkar. Emlak ve otomotivde piyasa fiyatı takibi bunun en tipik örneğidir: bölgenizdeki ilanların fiyat dağılımını haftada bir elle çıkarmak bir günü yerken, otomatik taramayla sabah kahvesi süresinde masanızda olur. İkinci güçlü senaryo satış listesi çıkarmaktır: belirli bir şehirdeki belirli bir sektörün işletmelerini toplamak. Üçüncüsü rakip takibidir. Buna karşılık tek seferlik, elli satırlık bir iş için otomasyon kurmak zaman kaybıdır — o işi elle yapmak daha hızlıdır. Kurulumun kendisi de yarım saatinizi alır; bu yatırımın geri dönmesi için işin tekrar etmesi gerekir. Dürüst ölçüt şudur: aynı işi ayda dörtten fazla yapıyorsanız otomasyon kazandırır, altındaysa düşünün.
Bu konuda net olmak gerekiyor. Botlarımız yalnızca herkese açık yayınlanan, giriş yapmadan da görülebilen bilgiyi okur; şifre kırma, paywall aşma veya özel veriye erişim gibi bir işlevleri yoktur. Toplanan veriyi nasıl kullandığınız ise tamamen sizin sorumluluğunuzdadır. İçinde kişisel veri varsa KVKK yükümlülükleri devreye girer: veri işleme amacınızı tanımlamanız, saklama süresi belirlemeniz ve gerektiğinde silmeniz gerekir. Topladığınız numaralara ticari mesaj göndermek isterseniz İYS kaydı ve elektronik ileti mevzuatı ayrıca geçerlidir. Bu yükümlülükleri üstlendiğimizi iddia etmiyoruz ve “tamamen yasal, hiçbir sorumluluk yok” diyen satıcılara temkinli yaklaşmanızı öneririz. Platform kuralları da ayrı bir başlıktır: hiçbir otomasyon aracı “asla engellenmezsiniz” diyemez. Varsayılan hız ayarlarımız makul tutulmuştur, agresif ayar önerilmez.
Herkese açık yayınlanan bilgiyi okumak başlı başına bir suç değildir; belirleyici olan veriyi nasıl kullandığınızdır. Kişisel veri işliyorsanız KVKK, ticari ileti gönderiyorsanız İYS ve elektronik ileti mevzuatı yükümlülükleri size aittir. Botlarımız şifre kırma veya kapalı içeriğe erişim yapmaz.
Hayır. Kurulumdan sonra hedefi arayüzden tanımlıyorsunuz: hangi site, hangi kategori, hangi filtre. Kod yazmanıza gerek yok. Kurulum adımlarını isterseniz uzaktan bağlanarak birlikte yapıyoruz; genellikle on beş dakika sürüyor.
Standart kapasite oturum başına bin kaydın üzerindedir ve oturum sayısında sınır yoktur. Daha büyük hacimlerde taramayı kategori veya şehir bazında parçalara bölmek hem daha hızlı biter hem hata payını düşürür.
Okuma kuralları etkilenebilir. Böyle bir durumda uyum yaması yayınlanır ve bot kendini otomatik günceller. Yamalar abonelik süresince ücretsizdir; değişimin fark edilmesiyle yamanın çıkması arasında kısa bir pencere olabilir.
Hayır. Program sizin Windows bilgisayarınızda çalışır, toplanan veri sizin diskinizde kalır. Bunun karşılığı bilgisayarın açık olması gerekliliğidir; gece taraması planlıyorsanız uyku modunu kapatmanız gerekir.
Tek platformda derinlemesine çalışacaksanız o platformun botu yeterlidir. Birden fazla pazaryerini tek panelde toplamak istiyorsanız Marketplace Pack, veri çekme ile mesajlaşmayı birleştirecekseniz İkisi Bir Arada daha uygun olur. Emin değilseniz canlı demoyu deneyin.