Divriği'nde web scraping (veri toplama) yaptırmak

01Web scraping (veri toplama) nedir, kimler için uygun?

Her işletmenin ihtiyacı farklıdır; yine de çoğu web scraping (veri toplama) projesinde şu başlıklar konuşulur:

• zamanlama
• robots/kullanım koşulu kontrolü
• temizleme

Bu projeler çoğu zaman yapılandırılmış veri çıkarma, RPA (süreç robotları) ve akıllı sınıflandırma gibi işlerle birlikte ele alınır.

02Hangi durumlarda web scraping (veri toplama) yaptırılır?

Belgelerden veri elle aktarıldığında

Fatura, form ve belgelerdeki alanlar okunur; kullanıcı doğrulama ekranında onaylayıp aktarır.

Şirket bilgisi dağınık olduğunda

Doküman ve prosedürlerden yetkiye göre cevap veren bir iç asistan kurulur.

Zamanlama gerektiğinde

Zamanlama, web scraping (veri toplama) projesinde kapsamın başında konuşulan başlıklardandır; analizde kimin kullanacağı ve nasıl çalışacağı netleştirilir.

03Web scraping (veri toplama) planlarken bilinmesi gerekenler

• RAG sistemlerinde belge kalitesi ve güncelliği cevap kalitesini belirler.
• Şirket verisi dış servislere gönderilecekse KVKK m.9 aktarım şartları ve sözleşmeler değerlendirilir; gerekirse yerel/şirket içi model kurulur.
• Maliyet, kullanım (token/istek) bazlı olabilir; izleme ve sınır konur.

04Divriği için uzaktan ve yerinde çalışma

Divriği, Sivas iline bağlı bir ilçedir ve PTT adres verisine göre 202 mahalle ve köy kaydından oluşur.

Yazılım projelerinde analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; Divriği'ndeki işletmelerle ekran paylaşımlı demolar ve ortak bir proje panosu üzerinden çalışılır. Donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.

Sivas genelinde Yıldızeli, Akıncılar ve Sivas Merkez gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.

05Çalışma adımları

1. İlk görüşme: Telefon, WhatsApp veya form üzerinden ihtiyacınızı ve mevcut durumu dinleriz.
2. Analiz: Süreç, kullanıcı rolleri, kullandığınız Excel veya eski sistem örnekleri ve bağlanacak sistemler incelenir.
3. Kapsam ve yazılı teklif: Modüller, aşamalar ve teslim kriterleri yazılı bir kapsamla belirlenir; teklif bu kapsama göre verilir.
4. Tasarım ve prototip: Tıklanabilir bir prototiple kullanıcı yolculuğu baştan sona denenir.
5. Geliştirme ve test: Her teslimde çalışan bir sürüm test ortamında paylaşılır; hatalar canlıya çıkmadan giderilir.
6. Yayın, veri aktarımı ve eğitim: Mevcut veriler aktarılır, sistem yayına alınır ve kullanıcılara eğitim verilir.
7. Bakım ve destek: Yeni ihtiyaçlar sürüm planına alınır; sistem kullanıldıkça geliştirilir.

06Rakamlarla örnek bir senaryo

07Nasıl çalışıyoruz?

Projeler tasarım, yazılım geliştirme, test ve yayın adımlarını kapsayan bir ekiple yürütülür. Sürüm kontrolü (Git), otomatik testler (Playwright), konteyner tabanlı yayın (Docker), sürekli entegrasyon ve izleme araçları standart çalışma düzenimizin parçasıdır.

• Kaynak kod ve veri işletmeye teslim edilir.
• Kapsam ve teslim kriterleri yazılı olur.
• Her değişiklik önce test ortamında denenir.

Türkiye'nin 81 ilindeki işletmelerle uzaktan çalışıyoruz; Sivas da bunlardan biri.

08Hangi durumlarda profesyonel destek gerekir?

Web scraping (veri toplama) işlerinde bazı durumlar plansız ilerlerse sonradan pahalıya mal olur:

• Chatbot yanlış bilgi veriyor: kaynak belge yok/eski.
• Otomasyon kırılgan: ekran tıklamasına dayalı.
• Kişisel veya finansal verinin işlendiği akışlar
• Birden fazla sistemle entegrasyon gerektiren işler

SSSSık sorulan sorular

→İlgili sayfalar

Bu sayfada geçen kavramlar

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü
• OCR
• KVKK
• chatbot
• embedding
• tahminleme
• WhatsApp botu
• insan onayı
• Sivas
• Divriği