Onikişubat'ta web scraping (veri toplama) yaptırmak

01Web scraping (veri toplama) ile neler yapılır?

Her işletmenin ihtiyacı farklıdır; yine de çoğu web scraping (veri toplama) projesinde şu başlıklar konuşulur:

• temizleme
• zamanlama
• robots/kullanım koşulu kontrolü

Web scraping (veri toplama) ile birlikte sık planlanan işler arasında yapılandırılmış veri çıkarma, RPA (süreç robotları) ve akıllı sınıflandırma bulunur.

02Hangi durumlarda web scraping (veri toplama) yaptırılır?

Ekip zamanını tekrarlayan işler aldığında

Web scraping (veri toplama) ile kopyala-yapıştır, veri girişi ve dosya işleme gibi adımlar otomatikleşir; ekip istisnalara odaklanır.

Belgelerden veri elle aktarıldığında

Fatura, form ve belgelerdeki alanlar okunur; kullanıcı doğrulama ekranında onaylayıp aktarır.

Şirket bilgisi dağınık olduğunda

Doküman ve prosedürlerden yetkiye göre cevap veren bir iç asistan kurulur.

03Web scraping (veri toplama) planlarken bilinmesi gerekenler

• RAG sistemlerinde belge kalitesi ve güncelliği cevap kalitesini belirler.
• WhatsApp ve SMS otomasyonlarında Meta kuralları ve İYS onayı gözetilir.
• Şirket verisi dış servislere gönderilecekse KVKK m.9 aktarım şartları ve sözleşmeler değerlendirilir; gerekirse yerel/şirket içi model kurulur.

04Onikişubat'ta web scraping (veri toplama): çalışma düzeni

Onikişubat, Kahramanmaraş iline bağlı bir ilçedir ve PTT adres verisine göre 142 mahalleden oluşur. Bu kayıtlardan 1 tanesi organize sanayi veya serbest bölge kaydıdır.

Yazılım projelerinde analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; Onikişubat'taki işletmelerle ekran paylaşımlı demolar ve ortak bir proje panosu üzerinden çalışılır. Donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.

Kahramanmaraş genelinde Pazarcık, Çağlayancerit ve Göksun gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.

05İlk görüşmeden yayına

1. İlk görüşme: Telefon, WhatsApp veya form üzerinden ihtiyacınızı ve mevcut durumu dinleriz.
2. Analiz: Ekranlar, raporlar ve entegrasyonlar için gerçek örnekler üzerinden ihtiyaç listesi çıkarılır.
3. Kapsam ve yazılı teklif: Modüller, aşamalar ve teslim kriterleri yazılı bir kapsamla belirlenir; teklif bu kapsama göre verilir.
4. Tasarım ve prototip: Tıklanabilir bir prototiple kullanıcı yolculuğu baştan sona denenir.
5. Geliştirme ve test: Kod sürüm kontrolüyle yönetilir, kritik akışlar otomatik testlerle korunur.
6. Yayın, veri aktarımı ve eğitim: Mevcut veriler aktarılır, sistem yayına alınır ve kullanıcılara eğitim verilir.
7. Bakım ve destek: Yeni ihtiyaçlar sürüm planına alınır; sistem kullanıldıkça geliştirilir.

06Rakamlarla örnek bir senaryo

07Ekip ve çalışma biçimimiz

Projeler tasarım, yazılım geliştirme, test ve yayın adımlarını kapsayan bir ekiple yürütülür. Sürüm kontrolü (Git), otomatik testler (Playwright), konteyner tabanlı yayın (Docker), sürekli entegrasyon ve izleme araçları standart çalışma düzenimizin parçasıdır.

• Yayın sonrası bakım ve destek planlanır.
• Kapsam ve teslim kriterleri yazılı olur.
• Kaynak kod ve veri işletmeye teslim edilir.

Türkiye'nin 81 ilindeki işletmelerle uzaktan çalışıyoruz; Kahramanmaraş da bunlardan biri.

08Hangi durumlarda profesyonel destek gerekir?

Web scraping (veri toplama) işlerinde bazı durumlar plansız ilerlerse sonradan pahalıya mal olur:

• Otomasyon kırılgan: ekran tıklamasına dayalı.
• Belgeler elle yazılıyor: OCR yok.
• Kişisel veya finansal verinin işlendiği akışlar
• Birden fazla sistemle entegrasyon gerektiren işler

SSSSık sorulan sorular

→İlgili sayfalar

Bu sayfada geçen kavramlar

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü
• OCR
• KVKK
• chatbot
• RPA
• RAG
• insan onayı
• Kahramanmaraş
• Onikişubat