Web scraping (veri toplama): olması gereken özellikler ve modüller (Meram)

01Olmazsa olmaz özellikler

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü

02İhtiyaca göre eklenen modüller

Şirket içi model kurulumu

Şirket içi model kurulumu, ihtiyaç netleştiğinde web scraping (veri toplama) içine ayrı bir modül olarak eklenebilir; ilk sürümde zorunlu değildir.

API tabanlı model kullanımı

API tabanlı model kullanımı, ihtiyaç netleştiğinde web scraping (veri toplama) içine ayrı bir modül olarak eklenebilir; ilk sürümde zorunlu değildir.

İnsan onaylı çalışma

Bu modül, iş akışınız gerektiriyorsa kapsamın başında konuşulur; aksi halde sonraki sürüm planına bırakılabilir.

Doğrulama ekranı

Doğrulama ekranı için kimin kullanacağı ve hangi veriye ihtiyaç duyulacağı analizde belirlenir.

03Web scraping (veri toplama) planlarken bilinmesi gerekenler

• Önce süreç ölçülür: işin adedi ve kişi başı süresi; otomasyonun faydası buradan görünür.
• Şirket verisi dış servislere gönderilecekse KVKK m.9 aktarım şartları ve sözleşmeler değerlendirilir; gerekirse yerel/şirket içi model kurulur.
• RAG sistemlerinde belge kalitesi ve güncelliği cevap kalitesini belirler.

04Kullanıcı rolleri ve yetkiler

05Raporlar ve mobil kullanım

Rapor ihtiyacı, kararların hangi rakamlara bakılarak verildiği sorusuyla belirlenir; her rapor bir karara hizmet etmelidir.

Arayüz mobil uyumlu tasarlanır; sahada veya yolda olan kullanıcılar tarayıcıdan aynı ekranlara erişir. Kamera, barkod veya çevrimdışı kullanım gerekiyorsa mobil uygulama değerlendirilir.

06Sektöre göre özellik önerileri

• Üretim ve kalite: Web scraping (veri toplama), üretim ve kalite için iş akışına göre uyarlanır.
• Operasyon ve depo: Web scraping (veri toplama), operasyon ve depo için iş akışına göre uyarlanır.
• Muhasebe ve finans: Web scraping (veri toplama), muhasebe ve finans için iş akışına göre uyarlanır.
• Müşteri hizmetleri: Web scraping (veri toplama), müşteri hizmetleri için iş akışına göre uyarlanır.

07Meram için özellik planı

Meram'ın PTT verisindeki 69 yerleşim kaydı 7 farklı posta koduna dağılır. Birden fazla ilçede ekibi veya şubesi olan işletmelerde web scraping (veri toplama) için kullanıcı rolleri, şube bazlı görünürlük ve merkezi raporlar birlikte planlanır.

Yazılım projelerinde analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; Meram'daki işletmelerle ekran paylaşımlı demolar ve ortak bir proje panosu üzerinden çalışılır. Donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.

Konya genelinde Yalıhüyük, Selçuklu ve Karatay gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.

SSSSık sorulan sorular

→İlgili sayfalar

Bu sayfada geçen kavramlar

• zamanlama
• temizleme
• robots/kullanım koşulu kontrolü
• OCR
• KVKK
• chatbot
• WhatsApp botu
• vektör veritabanı
• embedding
• insan onayı
• Konya
• Meram