Büyük Verinin Yönetimi

Büyük veri (Big Data), en genel tanımıyla, geleneksel veri depolama, işleme ve analiz uygulamalarının yetersiz kaldığı kadar büyük veya karmaşık olan veri kümeleri için kullanılan bir terim olarak değerlendiriliyor.  

İşlenmemiş veriyi yönetmek ve kullanmak zorlu olabilir. Büyük Verinin Yönetimi! Başlığı çok yaygın kullanılan bir başlık; ancak yine de ısrarla konuya yeniden dikkati çekebilmek adına kullandım.

2020’de sayısal veri, 40 milyar terabayta ulaşacak deniliyor. Matematiksel olarak rakamı kafamda canlandıramasam da tüm dünyada kullanılan veri miktarını düşündüğümde rakamın ne anlama gelebildiğini biliyorum.

 Dünyada, geleneksel veri kaynakları yanında cihaz, algılayıcı, coğrafi uygulamalar, web ve sosyal medyadan elde edilen sayısal veriler her geçen yıl katlanarak artıyor. Veri artışı, büyük veri kavramının ortaya çıkmasına neden oldu ve bütün bu verilerden anlamlı sonuçlar çıkarılmasını sağlayacak teknolojik gelişmeleri ve yatırımları da tetikledi.

Web sitelerinin kapladığı hacmin ve bilginin belirlenmesine yönelik bir araştırma var mı bilmiyorum. Eğer yoksa da böyle bir araştırmanın en kısa sürede yapılmasına ihtiyaç var sanırım. Büyük Veri’nin yönetilmesinde önemli ayaklardan biri de bu sanırım…

Bilgi toplumuna geçiş sürecine paralel olarak son yıllarda giderek daha da büyüyen büyük verinin, kamu sektörü ve kamu politikaları açısından Türkiye’deki mevcut durumu da bir araştırmayla özetlenmeye çalışılmış.  

Büyük verinin rekabete etkisi

Dünyada, bireylere, şirketlere, kamu kurumlarına ekonomilere, internete, web ve blog sitelerine, medya ve sosyal medya platformlarına, ülkelere ait veriler, kayıtlar, görseller her an yeniden ve hızla üretilmeye devam ediyor. Hem geleneksel hem de dijital kaynakları kapsayan büyük veri, veri yakalama, elde etme ve depolama konusunu kapsayan bir ifade.

Büyük veri, özellikle ülkelerin ve şirketlerin rekabet güçlerini artırabilmeleri, verimliliği yakalayabilmeleri için büyük bir güç olarak nitelendirilirken; sürdürülebilir bir geleceğin de ‘anahtar’ı olarak görülüyor.

Büyük verileri depolayabilmek ve ihtiyaç duyulduğunda sorgulayabilmek için yeni veri depolama teknik ve standartlarına ihtiyaç var. Bu itibarla, büyük veri; veri tabanı yazılım araçlarıyla yakalama, depolama, yönetimi ve analiz edilebilmesi yetkinlik sınırlarının ötesine geçen veri setlerini ifade ediyor.

Günümüzün ve geleceğin gidişatına inovasyonun yön vereceğinin altı çizilirken; bunun da aracının büyük veri olduğuna işaret ediliyor.

Ham ya da karışık yapıda bulunan zengin verinin analitiğine ihtiyaç duyulurken; uzmanlar, büyük veride başarıya ulaşmak için işletmelere öncelikle büyük veri ile ilgili veri durumlarını değerlendirmelerini öneriyor. Ve verilerden maksimum düzeyde yararlanılmasına dikkati çekiyor.

Özetle, büyük veri işletmelere yeni iş modeli geliştirerek farklılaşma ve dolayısıyla yeni iş olanak ve alanları oluşturma gibi fırsatlar sunuyor.

Bulut sistemleri-büyük veri ilişkisi

İnternet üzerinden alınan bir hizmet modeli olan bulut bilişim ile çeşitli türde çok miktardaki veriyi simgeleyen büyük veri kavramları, birbiri ile iç içe geçmiş durumda. Büyük verinin barındırılması ve işlenmesi için veri merkezlerine ve bu merkezlere her yerden erişebilmek için de bulut bilişim sistemine ihtiyaç duyuluyor.

Bilginin işlenmesi süreçlerinde otomasyon teknolojileri, bulut teknolojileri üzerinden birbirleri ile iletişim kuruyor. 

Günümüzde 6 milyar akıllı cihaz bulut teknolojisi ile birbirine bağlanmış durumda… 2020 yılında bu sayının 20 milyara ulaşması bekleniyor. 

Kişisel bilgisayarlar, akıllı telefonlar, yönetim sunucuları, üretim bantları, komünikasyon ve yön bulma sistemleri, borsalar, bankalar, sigorta şirketleri, kredi kuruluşları, elektrik, doğal gaz, su dağıtım şebekeleri, birbirine bağlanabilen tüm sistemler, bulut teknolojisini kullanarak birbirine bağlanıyor.

Bulut bilişim uygulamaları ve büyük veri analizinin özellikle müşteri ilişkileri yönetimi ve pazarlama stratejilerinin belirlenmesindeki etkileri önemli bir araştırma konusu olmuş.

Bulut bilişim sistemlerinin ve büyük veri analizlerinin kamu ve özel sektördeki kullanım alanlarını ele alan araştırmada, ileriye dönük planlar ve riskler ile avantajlar ortaya konulmuş.

Büyük veri olarak adlandırılabilen birçok verinin imha edileceği veya buluta taşınacağı öngörülürken; bu durumun da geleneksel veri depolama merkezlerinin hasılatına darbe vurabileceği belirtiliyor. Bu noktada da bulut çözümleri büyük önem kazanıyor ve küçük büyük her firma kendine uygun bulut çözümleri arayışına giriyor.

Bulut bilişimle verileri saklamada çeşitli yol ve yönlemler bulunuyor. Bunlardan biri de sıradan sunucu kümeleri üzerinde büyük verileri güvenilir, ölçeklenebilir ve dağıtık bir şekilde işlemek için geliştirilmiş açık kaynak kodlu Hadoop projesi.

Büyük verinin endüstriyel kullanımı

Büyük Verinin endüstriyel kullanımı, birçok şirketin daha verimli iş süreçlerine imkan sağlıyor. Son yıllarda modern endüstrilerin çoğu büyük verinin oyun değiştirici bir rol oynadığını kabul ediyor.

Şirketler, müşteri deneyimini iyileştirmek, maliyetleri azaltmak, daha iyi hedeflenmiş pazarlama ve mevcut süreçleri daha verimli hale getirmek gibi konularda büyük veriden yararlanıyor.  

Büyük veriden yararlanan 10 endüstri sektörü şöyle sıralanıyor:  

Bankacılık ve Menkul Kıymetler, İletişim, Medya ve Eğlence, Sağlık Hizmetleri, Eğitim Sektörü, Üretim ve Doğal Kaynaklar, Kamu Faaliyetleri, Sigortacılık, Perakende ve Toptan Satış Ticareti, Ulaşım Sektörü, Enerji Sektörü.