Mudurnu'da web scraping (veri toplama) yaptırmak

01Web scraping (veri toplama) ile neler yapılır?

Web scraping (veri toplama) projelerinde ihtiyaca göre şu özellikler bir araya getirilir:

• temizleme
• zamanlama
• robots/kullanım koşulu kontrolü

Bu projeler çoğu zaman yapılandırılmış veri çıkarma, RPA (süreç robotları) ve akıllı sınıflandırma gibi işlerle birlikte ele alınır.

02Hangi durumlarda web scraping (veri toplama) yaptırılır?

Belgelerden veri elle aktarıldığında

Fatura, form ve belgelerdeki alanlar okunur; kullanıcı doğrulama ekranında onaylayıp aktarır.

Şirket bilgisi dağınık olduğunda

Doküman ve prosedürlerden yetkiye göre cevap veren bir iç asistan kurulur.

Ekip zamanını tekrarlayan işler aldığında

Web scraping (veri toplama) ile kopyala-yapıştır, veri girişi ve dosya işleme gibi adımlar otomatikleşir; ekip istisnalara odaklanır.

03Web scraping (veri toplama) planlarken bilinmesi gerekenler

• Şirket verisi dış servislere gönderilecekse KVKK m.9 aktarım şartları ve sözleşmeler değerlendirilir; gerekirse yerel/şirket içi model kurulur.
• Maliyet, kullanım (token/istek) bazlı olabilir; izleme ve sınır konur.
• RAG sistemlerinde belge kalitesi ve güncelliği cevap kalitesini belirler.

04Sık karşılaşılan durumlar

05Mudurnu için uzaktan ve yerinde çalışma

PTT kayıtlarında Mudurnu ilçesine bağlı 220 yerleşim bulunur: 13 mahalle ile 207 köy ve köy yerleşimi.

Mesafe yazılım işinin önünde engel değildir: Mudurnu'daki ekiplerle görüntülü görüşme, ekran paylaşımı ve test ortamı bağlantısıyla çalışılır; cihaz kurulumu veya saha keşfi gerekirse yerinde ziyaret planlanır.

Bolu genelinde Kıbrıscık, Dörtdivan ve Mengen gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.

06İlk görüşmeden yayına

1. İlk görüşme: Kısa bir görüşmede ne yapmak istediğinizi, bugün nasıl çalıştığınızı ve öncelikli sorunu konuşuruz.
2. Analiz: Kimin neyi göreceği, hangi verinin nereden geleceği ve hangi işin önce çözüleceği netleştirilir.
3. Kapsam ve yazılı teklif: Modüller, aşamalar ve teslim kriterleri yazılı bir kapsamla belirlenir; teklif bu kapsama göre verilir.
4. Tasarım ve prototip: Ekran akışları ve tasarımlar hazırlanır, onayınızdan sonra geliştirmeye geçilir.
5. Geliştirme ve test: Kod sürüm kontrolüyle yönetilir, kritik akışlar otomatik testlerle korunur.
6. Yayın, veri aktarımı ve eğitim: Canlıya geçiş planlı bir zamanda yapılır; ilk günlerde kullanım yakından izlenir.
7. Bakım ve destek: Hata bildirimleri kayıt altına alınır, güncellemeler test edilerek uygulanır.

07Örnek planlama hesabı

08Nasıl çalışıyoruz?

Projeler tasarım, yazılım geliştirme, test ve yayın adımlarını kapsayan bir ekiple yürütülür. Sürüm kontrolü (Git), otomatik testler (Playwright), konteyner tabanlı yayın (Docker), sürekli entegrasyon ve izleme araçları standart çalışma düzenimizin parçasıdır.

• Her değişiklik önce test ortamında denenir.
• Alan adı ve sunucu hesapları işletme adına açılır.
• Kapsam ve teslim kriterleri yazılı olur.

Türkiye'nin 81 ilindeki işletmelerle uzaktan çalışıyoruz; Bolu da bunlardan biri.

09Uzman desteği ne zaman şart olur?

Web scraping (veri toplama) işlerinde bazı durumlar plansız ilerlerse sonradan pahalıya mal olur:

• Chatbot yanlış bilgi veriyor: kaynak belge yok/eski.
• Belgeler elle yazılıyor: OCR yok.
• Kişisel veya finansal verinin işlendiği akışlar
• Birden fazla sistemle entegrasyon gerektiren işler

SSSSık sorulan sorular

→İlgili sayfalar

Bu sayfada geçen kavramlar

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü
• OCR
• KVKK
• chatbot
• RAG
• embedding
• LLM
• insan onayı
• Bolu
• Mudurnu