Kozluk'ta web scraping (veri toplama) yaptırmak

01Web scraping (veri toplama) ile neler yapılır?

Web scraping (veri toplama) projelerinde ihtiyaca göre şu özellikler bir araya getirilir:

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü

İhtiyaca göre yapılandırılmış veri çıkarma, RPA (süreç robotları) ve akıllı sınıflandırma da aynı yol haritasına eklenebilir.

02Hangi durumlarda web scraping (veri toplama) yaptırılır?

Ekip zamanını tekrarlayan işler aldığında

Web scraping (veri toplama) ile kopyala-yapıştır, veri girişi ve dosya işleme gibi adımlar otomatikleşir; ekip istisnalara odaklanır.

Belgelerden veri elle aktarıldığında

Fatura, form ve belgelerdeki alanlar okunur; kullanıcı doğrulama ekranında onaylayıp aktarır.

Zamanlama gerektiğinde

Zamanlama, web scraping (veri toplama) projesinde kapsamın başında konuşulan başlıklardandır; analizde kimin kullanacağı ve nasıl çalışacağı netleştirilir.

03Web scraping (veri toplama) planlarken bilinmesi gerekenler

• RAG sistemlerinde belge kalitesi ve güncelliği cevap kalitesini belirler.
• Şirket verisi dış servislere gönderilecekse KVKK m.9 aktarım şartları ve sözleşmeler değerlendirilir; gerekirse yerel/şirket içi model kurulur.
• WhatsApp ve SMS otomasyonlarında Meta kuralları ve İYS onayı gözetilir.

04Kozluk için uzaktan ve yerinde çalışma

Kozluk, Batman iline bağlı bir ilçedir ve PTT adres verisine göre 220 mahalle ve köy kaydından oluşur.

Yazılım projelerinde analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; Kozluk'taki işletmelerle ekran paylaşımlı demolar ve ortak bir proje panosu üzerinden çalışılır. Donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.

Batman genelinde Sason, Hasankeyf ve Beşiri gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.

05Çalışma adımları

1. İlk görüşme: Telefon, WhatsApp veya form üzerinden ihtiyacınızı ve mevcut durumu dinleriz.
2. Analiz: Süreç, kullanıcı rolleri, kullandığınız Excel veya eski sistem örnekleri ve bağlanacak sistemler incelenir.
3. Kapsam ve yazılı teklif: Analiz sonrasında aşamalı plan ve yazılı teklif paylaşılır; ödeme planı aşamalara bağlanabilir.
4. Tasarım ve prototip: Temel ekranlar çizilir; kullanıcıların geri bildirimiyle akış sadeleştirilir.
5. Geliştirme ve test: Her teslimde çalışan bir sürüm test ortamında paylaşılır; hatalar canlıya çıkmadan giderilir.
6. Yayın, veri aktarımı ve eğitim: Mevcut veriler aktarılır, sistem yayına alınır ve kullanıcılara eğitim verilir.
7. Bakım ve destek: Hata bildirimleri kayıt altına alınır, güncellemeler test edilerek uygulanır.

06Örnek planlama hesabı

07Nasıl çalışıyoruz?

Tasarım, geliştirme, test ve yayın adımları aynı ekip içinde yürür. Kod Git ile sürümlenir, kritik akışlar Playwright testleriyle korunur, yayın Docker konteynerleriyle tekrarlanabilir biçimde yapılır.

• Kapsam ve teslim kriterleri yazılı olur.
• Kaynak kod ve veri işletmeye teslim edilir.
• Her değişiklik önce test ortamında denenir.

Türkiye'nin 81 ilindeki işletmelerle uzaktan çalışıyoruz; Batman da bunlardan biri.

08Uzman desteği ne zaman şart olur?

Web scraping (veri toplama) işlerinde bazı durumlar plansız ilerlerse sonradan pahalıya mal olur:

• Chatbot yanlış bilgi veriyor: kaynak belge yok/eski.
• Otomasyon kırılgan: ekran tıklamasına dayalı.
• Kişisel veya finansal verinin işlendiği akışlar
• Birden fazla sistemle entegrasyon gerektiren işler

SSSSık sorulan sorular

→İlgili sayfalar

Bu sayfada geçen kavramlar

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü
• OCR
• KVKK
• chatbot
• vektör veritabanı
• RAG
• sınıflandırma
• Batman
• Kozluk