Yüksek hacimli verinin işlenmesi ve veri hatları.
01Büyük veri işleme nedir, kimler için uygun?
Her işletmenin ihtiyacı farklıdır; yine de çoğu büyük veri işleme projesinde şu başlıklar konuşulur:
- pipeline
- toplu/akış işleme
Bu projeler çoğu zaman zaman serisi tahmin yazılımı, ETL süreçleri ve stok analizi gibi işlerle birlikte ele alınır.
02Hangi durumlarda büyük veri işleme yaptırılır?
Pipeline gerektiğinde
Pipeline, büyük veri işleme projesinde kapsamın başında konuşulan başlıklardandır; analizde kimin kullanacağı ve nasıl çalışacağı netleştirilir.
Rapor hazırlamak günler aldığında
Büyük veri işleme ile dağınık kaynaklar birleştirilir; raporlar istenen sıklıkta kendiliğinden hazırlanır.
Farklı birimler farklı rakam söylediğinde
Ortak veri modeli ve KPI tanımları ile herkes aynı sayıya bakar.
03Büyük veri işleme planlarken bilinmesi gerekenler
- Önce hangi sorulara cevap arandığı yazılır (KPI listesi).
- Kişisel veri anonimleştirme/maskeleme gerekiyorsa uygulanır.
- Veri kaynakları ve güncelleme sıklığı belirlenir.
04Sık karşılaşılan durumlar
| Durum | Olası neden | Çözüm |
|---|---|---|
| Rapor yavaş | İndeks/model yok | Optimizasyon ve özet tablolar |
| Mükerrer kayıt | Eşsiz anahtar yok | Veri temizleme kuralları |
| Her departman farklı rakam söylüyor | Tanım birliği yok | Ortak veri modeli |
05Ataşehir'de büyük veri işleme: çalışma düzeni
Ataşehir'in PTT verisindeki 17 yerleşim kaydı 9 farklı posta koduna dağılır. Büyükşehirlerde merkez ve şube yapısıyla çalışan işletmeler için büyük veri işleme tasarımında merkez-şube yetki yapısı ve birleşik raporlama öne çıkar.
Yazılım projelerinde analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; Ataşehir'deki işletmelerle ekran paylaşımlı demolar ve ortak bir proje panosu üzerinden çalışılır. Donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.
İstanbul genelinde Sarıyer, Esenler ve Sultanbeyli gibi diğer ilçelerdeki işletmelerle de aynı uzaktan çalışma düzeniyle ilerlenir.
Büyük veri işlemeyi planlıyorsanız 0540 003 19 81 numarasını arayın veya WhatsApp'tan ihtiyacınızı birkaç cümleyle yazın; teklif formunu da doldurabilirsiniz.
06Çalışma adımları
- İlk görüşme: İlk temas telefonla ya da WhatsApp'tan olur; işin kapsamını anlamak için birkaç temel soru sorarız.
- Analiz: Süreç, kullanıcı rolleri, kullandığınız Excel veya eski sistem örnekleri ve bağlanacak sistemler incelenir.
- Kapsam ve yazılı teklif: Analiz sonrasında aşamalı plan ve yazılı teklif paylaşılır; ödeme planı aşamalara bağlanabilir.
- Tasarım ve prototip: Tıklanabilir bir prototiple kullanıcı yolculuğu baştan sona denenir.
- Geliştirme ve test: Geliştirme aşamalı ilerler; her aşama test ortamında denenip onaylanır.
- Yayın, veri aktarımı ve eğitim: Mevcut veriler aktarılır, sistem yayına alınır ve kullanıcılara eğitim verilir.
- Bakım ve destek: Yayın sonrası izleme, güncelleme ve geliştirme talepleri bakım planıyla sürdürülür.
NotTanımlar tekleştirilir (ör. "satış" iade dahil mi?).
07Rakamlarla örnek bir senaryo
Örnek: veritabanı büyüklüğü
- Günlük kayıt
- 21.300
- Satır boyutu
- 4 KB
- Süre
- 3 yıl
- Yaklaşık veri
- 88,97 GB
- 30 günlük yedek seti
- 2.669,2 GB (tam yedek varsayımıyla)
İndeksler ve dosya ekleri boyutu artırır. Not: örnek hesaptır; kesin plan analizde çıkar.
08Çalışma düzenimiz
Projeler tasarım, yazılım geliştirme, test ve yayın adımlarını kapsayan bir ekiple yürütülür. Sürüm kontrolü (Git), otomatik testler (Playwright), konteyner tabanlı yayın (Docker), sürekli entegrasyon ve izleme araçları standart çalışma düzenimizin parçasıdır.
- Yayın sonrası bakım ve destek planlanır.
- KVKK baştan tasarlanır.
- Alan adı ve sunucu hesapları işletme adına açılır.
Türkiye'nin 81 ilindeki işletmelerle uzaktan çalışıyoruz; İstanbul da bunlardan biri.
09Uzman desteği ne zaman şart olur?
Büyük veri işleme işlerinde bazı durumlar plansız ilerlerse sonradan pahalıya mal olur:
- Rapor yavaş: indeks/model yok.
- Mükerrer kayıt: eşsiz anahtar yok.
- Kişisel veya finansal verinin işlendiği akışlar
- Birden fazla sistemle entegrasyon gerektiren işler
SSSSık sorulan sorular
Sonradan özellik ekleyebilir miyiz?
Evet; yazılım modüler planlanır, yeni özellikler sürüm planıyla eklenir.
Kaynak kod bize mi ait olacak?
Sözleşmede yazılı olarak belirtilir; biz kaynak kodun ve verinin işletmeye teslim edildiği çalışma biçimini öneririz.
Proje ne kadar sürer?
Süre kapsam, entegrasyonlar ve içerik/veri hazırlığına göre değişir; analizden sonra aşamalı bir plan paylaşılır.
İstanbul dışındaki işletmelere de hizmet veriyor musunuz?
Hayır, Türkiye'nin her ilindeki işletmelerle çalışıyoruz; Marmara Bölgesi dahil tüm bölgelerde süreç aynı düzenle yürür.
Ataşehir'den yazıyorum; toplantılar nasıl yapılıyor?
Analiz, tasarım ve geliştirme çoğunlukla uzaktan, görüntülü toplantılarla yürür; donanım kurulumu, saha keşfi veya kullanıcı eğitimi gereken işlerde yerinde çalışma planlanır.
Büyük veri işleme sonradan genişletilebilir mi?
Evet. Pipeline gibi özellikler ilk sürümde olmasa da modüler yapı sayesinde sürüm planıyla eklenebilir.
Büyük veri işleme için hangi bilgiler hazırlanmalı?
Mevcut sürecin kısa anlatımı, kullanılan dosya ve program örnekleri, kullanıcı sayısı ve toplu/akış işleme gibi beklentiler ilk görüşme için yeterlidir; kapsam analizde netleşir.
Power BI mı özel dashboard mı?
Ekip Power BI kullanıyorsa ve lisans yapısı uygunsa Power BI hızlı bir başlangıç sağlar. Müşteriye açılacak, özel tasarım veya uygulama içine gömülü panolar gerekiyorsa özel dashboard daha uygun olabilir.
→İlgili sayfalar
Büyük Veri İşleme hakkında diğer konular
- Büyük veri işleme bakım ve destekYayın sonrası bakım, güncelleme ve destek
- Büyük veri işleme entegrasyonlarıBağlanabilecek sistemler
- Büyük veri işleme geçiş ve veri aktarımıExcel'den veya eski sistemden geçiş
- Büyük veri işleme fiyatlarıMaliyeti belirleyen kalemler ve teklif karşılaştırma
- Büyük veri işleme teknolojileriTeknoloji seçimi ve mimari
Ataşehir'de ilgili hizmetler
İstanbul içindeki diğer ilçeler
Bu sayfada geçen kavramlar
- toplu/akış işleme
- pipeline
- SQL Server
- migrasyon
- MySQL
- KPI
- veri ambarı
- veri temizleme
- dashboard
- İstanbul
- Ataşehir