Eldivan'da web scraping (veri toplama) yaptırmak

01Web scraping (veri toplama) ile neler yapılır?

Her işletmenin ihtiyacı farklıdır; yine de çoğu web scraping (veri toplama) projesinde şu başlıklar konuşulur:

• temizleme
• robots/kullanım koşulu kontrolü
• zamanlama

İhtiyaca göre yapılandırılmış veri çıkarma, RPA (süreç robotları) ve akıllı sınıflandırma da aynı yol haritasına eklenebilir.

02Hangi durumlarda web scraping (veri toplama) yaptırılır?

Ekip zamanını tekrarlayan işler aldığında

Web scraping (veri toplama) ile kopyala-yapıştır, veri girişi ve dosya işleme gibi adımlar otomatikleşir; ekip istisnalara odaklanır.

Şirket bilgisi dağınık olduğunda

Doküman ve prosedürlerden yetkiye göre cevap veren bir iç asistan kurulur.

Belgelerden veri elle aktarıldığında

Fatura, form ve belgelerdeki alanlar okunur; kullanıcı doğrulama ekranında onaylayıp aktarır.

03Web scraping (veri toplama) planlarken bilinmesi gerekenler

• Önce süreç ölçülür: işin adedi ve kişi başı süresi; otomasyonun faydası buradan görünür.
• Yapay zekâ çıktısı doğrulama adımıyla tasarlanır (insan onayı, güven eşiği).
• RAG sistemlerinde belge kalitesi ve güncelliği cevap kalitesini belirler.

04Eldivan'da web scraping (veri toplama): çalışma düzeni

Eldivan'ın PTT verisindeki 25 yerleşim kaydı 2 farklı posta koduna dağılır.

Yazılım projelerinde analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; Eldivan'daki işletmelerle ekran paylaşımlı demolar ve ortak bir proje panosu üzerinden çalışılır. Donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.

Çankırı genelinde Şabanözü, Bayramören ve Yapraklı gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.

05Çalışma adımları

1. İlk görüşme: Kısa bir görüşmede ne yapmak istediğinizi, bugün nasıl çalıştığınızı ve öncelikli sorunu konuşuruz.
2. Analiz: Kimin neyi göreceği, hangi verinin nereden geleceği ve hangi işin önce çözüleceği netleştirilir.
3. Kapsam ve yazılı teklif: Hangi işin hangi aşamada teslim edileceği ve neyin kapsam dışı olduğu teklifte açıkça yazılır.
4. Tasarım ve prototip: Ekran akışları ve tasarımlar hazırlanır, onayınızdan sonra geliştirmeye geçilir.
5. Geliştirme ve test: Her teslimde çalışan bir sürüm test ortamında paylaşılır; hatalar canlıya çıkmadan giderilir.
6. Yayın, veri aktarımı ve eğitim: Veri aktarımı doğrulandıktan sonra yayına geçilir; ekip için kısa kullanım kılavuzu hazırlanır.
7. Bakım ve destek: Hata bildirimleri kayıt altına alınır, güncellemeler test edilerek uygulanır.

06Rakamlarla örnek bir senaryo

07Ekip ve çalışma biçimimiz

Tasarım, geliştirme, test ve yayın adımları aynı ekip içinde yürür. Kod Git ile sürümlenir, kritik akışlar Playwright testleriyle korunur, yayın Docker konteynerleriyle tekrarlanabilir biçimde yapılır.

• Kaynak kod ve veri işletmeye teslim edilir.
• Her değişiklik önce test ortamında denenir.
• Yayın sonrası bakım ve destek planlanır.

Türkiye'nin 81 ilindeki işletmelerle uzaktan çalışıyoruz: görüntülü toplantı, ekran paylaşımlı demo ve ortak proje panosu. Donanım kurulumu, depo barkod sistemi kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.

08Hangi durumlarda profesyonel destek gerekir?

Web scraping (veri toplama) işlerinde bazı durumlar plansız ilerlerse sonradan pahalıya mal olur:

• Chatbot yanlış bilgi veriyor: kaynak belge yok/eski.
• Belgeler elle yazılıyor: OCR yok.
• Kişisel veya finansal verinin işlendiği akışlar
• Birden fazla sistemle entegrasyon gerektiren işler

SSSSık sorulan sorular

→İlgili sayfalar

Bu sayfada geçen kavramlar

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü
• OCR
• KVKK
• chatbot
• RAG
• vektör veritabanı
• sınıflandırma
• embedding
• Çankırı
• Eldivan