İçeriğe atla
ALBA
Görüşme isteyin

Dışarıdan veri toplama ve izleme · 01 / 7

Web sitelerinde kendi kendine bilgi toplama

Bir konu hakkında bilgi toplamak bugün sekme sekme gezinmek demektir: site açılır, ilgili sayfa aranır, bulunan kopyalanır, listeye yapıştırılır. Aranan bilgi her sitede farklı yerde durduğu için iş kısayola gelmez ve kişi başına saatler gider.

Otomatikleşince ne değişir

Aranacak bilgi tarif edilir, hangi sayfaya gidileceği kararını sistem kendi verir ve bulduğunu doğrudan veri tabanına yazar; 28 adımlık akış elle başlatılır, kişiye sadece sonucu okumak kalır.

Çalışırken

Elle tetikli · 28 adım · 5 farklı adım türü

Yukarıdaki liste, akışın 28 adımı boyunca geçtiği 5 farklı adım türünü sırasıyla gösterir; aynı tür birden çok kez tekrarlanabildiği için liste toplam adım sayısından kısadır. Ok tuşlarıyla gezebilir, boşluk tuşuyla durdurabilirsiniz.

Bilgi toplama işi bugün nasıl yürüyor?

Sekme sekme geziniyor. Site açılıyor, ilgili sayfa aranıyor, bulunan kopyalanıp listeye yapıştırılıyor. Aranan bilgi her sitede farklı yerde durduğu için iş kısayola gelmiyor ve kişi başına saatler gidiyor.

Toplanacak kaynak sayısı artınca ne oluyor?

İş yarım kalıyor. Elli firmanın bilgisini toplamaya başlayan kişi otuzuncuda yavaşlıyor, kırkıncıda dikkati dağılıyor. Listenin son kısmı ilk kısmından daha az özenli doluyor ve bu fark sonuçta görünmüyor.

Sistem kurulunca ne değişir?

Aranacak bilgi tarif ediliyor, hangi sayfaya gidileceği kararını sistem kendi veriyor ve bulduğunu doğrudan veri tabanına yazıyor. Kişiye yalnız sonucu okumak kalıyor ve son satır ilk satır kadar özenli oluyor.

Sık sorulanlar

Bu iş hakkında sorulanlar

Hangi siteler taranabiliyor?
Herkese açık sayfalar taranabiliyor. Giriş isteyen, robotları engelleyen ya da kullanım şartlarında bunu yasaklayan siteler kapsam dışı kalıyor. Hangi kaynakların uygun olduğu kurulumdan önce kontrol ediliyor; bu hem hukuki hem teknik bir kontrol.
Bulduğu bilgi doğru mu?
Bulunan her değerin hangi sayfadan geldiği kaydediliyor, böylece şüphelenilen satır kaynağından doğrulanabiliyor. Sistem emin olamadığında boş bırakıp işaretliyor, uydurma değer yazmıyor. Bu kurulumun şartı ve ilk turda birlikte sınanıyor.
Ne kadar hızlı çalışıyor?
Hız kaynak sayısına ve sayfaların yapısına bağlı. Elle saatler süren bir liste genellikle dakikalarla ölçülen bir işe dönüşüyor. Sitelere yük bindirmemek için istekler arasında bekleme konuyor; bu bilinçli bir yavaşlatma.
Sayfa yapısı değişince bozuluyor mu?
Sabit kurala bağlı toplayıcılar bozuluyor, bu akış sayfayı okuyup karar verdiği için daha dayanıklı. Yine de tamamen bağışık değil; beklediğini bulamadığında sessizce boş dönmek yerine duruyor ve haber veriyor.
Ne kadar sürede kurulur?
Birkaç kaynak ve net bir bilgi tanımı varsa kurulum günlerle ölçülür. Çok sayıda kaynak, karmaşık sayfa yapıları ya da doğrulama katmanı girdiğinde süre uzar. Kesin gün, süreç dinlendikten sonra yazılı olarak veriliyor.

Şeffaflık

Bu, sizin için kurulmuş bir iş değil — kurulabilecek bir iş.

Yukarıdaki adımlar çalışan bir iş akışı tanımından çıkarıldı. Sizin şirketinizde kurulduğunda adımların bir kısmı aynı kalır, bir kısmı sizin sisteminize göre değişir: hangi tabloya yazılacağı, kimin onaylayacağı, hangi belge biçimini okuyacağı. Görüşmede bunu birlikte çıkarıyoruz.

Aynı ailede

Dışarıdan veri toplama ve izleme ailesindeki diğer işler

18 adım

  1. Belirlenen saatte kendiliğinden başlar
  2. Tabloya yazılır veya okunur
  3. Alanlar düzenlenir
  4. Yayın akışı okunur
  5. Özel kural çalıştırılır
  6. Koşula göre ayrılır
  7. 5 adım türü daha

Dışarıdan veri toplama ve izleme ailesinin tamamı