TWITTER VERİLERİNİN KNIME İLE İNCELENMESİ

Twitter verilerine ulaşabilmek için login olup  apps.twitter.com adresinden  twitter application oluşturuyoruz.


Uygulama oluştuktan sonra Keys and Access Tokens ayarlarından bizim için key oluşturmasını istiyoruz.
Sonrasında yeni bir Knime projesi oluşturuyoruz ve ilk node olarak Twitter Api Connector’u seçiyoruz. Sonrasında twitter uygulamamızdaki API key, API secret, Access token, Access token secret bilgilerini configure ayarları ekranındaki alanlara yazıyoruz.

Sonrasında sırasıyla aşağıdaki node’ları ekleyerek basit bir uygulama yaptım. Twitter search node’u ile ne arayacağımızı ayarlıyoruz.
Uygulamamız verileri çekmeye başladıktan sonra çeşitli filtreler ile gruplamalar yapabiliriz.
Uygulamamda twitter kullanıcılarının @iettdestek hesabına yazmış oldukları tweet’leri alıp üzerinde birkaç işlem gerçekleştirdim.

Twitter’dan gelen ilk verileri bir doküman olarak alıp üzerinde bazı textprocessing işlemleri yapmak için StringsTo Document node’u ekliyoruz. Artık her tweet’i bir dökümanın bir satırı olarak düşünüp cümleyi kelime kelime ayırmak için sırasıyla Bag of Words Creator >Punctuation Erasure>Number Filter>Stop Word filter düğümlerini ekliyoruz.


TF node’u ile ayırdığımız kelimelerin frekanslarını buluyoruz ve group by configure ile veri kümesinde yani işlenmiş olan dökümanımızdaki frekansını bulduğumuz kelimelerin toplamda kaç kez geçtiğini ayarlıyoruz. Sonrasında sorter en çok kullanılan kelimeleri azalan sıra ile sıraladıktan sonra görsel bir sonuç elde etmek için Tag Cloud ekledim.

Twitter kullanıcıları @iettdestek hesabına en çok bu kelimelerle tweet atmış:

Son olarak aynı işlemi Twitter Timeline node’una bağlayarak @iettdestek hesabının gelen mention’lara verdiği yanıtlara uyguladım ve şöyle bir görsel elde ettim:

KNIME ortamında çok daha işlevsel veri analizleri yapmak mümkün veri madenciliğine yeni başlayanlar için basit ve eğlenceli bir giriş uygulamasını sizlerle paylaştım, umarım faydalı bir içerik olmuştur.

Bu blogdaki popüler yayınlar

Qad Kafani İlmu Rabbi

Resim
RABBİMİN İLMİ BANA YETER Rabbimin ilmi bana yeter, Soru sorarken de, seçim yaparken de Dualarım ve niyazlarım ise Benim yoksulluğumun şahididir. Bu sır(sebep) ile niyaz ediyorum Rahatlık zamanlarında da, zorlu zamanlarda da Ben kölesiyim onların ki, Gururları yoksulluklarında ve teslimiyetlerindedir. Rabbimin ilmi bana yeter, Soru sorarken de, seçim yaparken de Dualarım ve niyazlarım ise Benim yoksulluğumun şahididir. Ey İlahi, Ey Sultanım Benim halimi biliyorsun. Kalbimin neler ile dolup taştığını Sıkıntılarımı ve endişelerimi Beni lütufla kuşat Lütfunla, Ey Sevgililer Sevgilisi. Ey Cömertlerin Cömerdi, beni kurtar Ben kendime karşı sabrımı yitirmeden önce. Rabbimin ilmi bana yeter, Soru sorarken de, seçim yaparken de Dualarım ve niyazlarım ise Benim yoksulluğumun şahididir. Ey yardım etmede tez olan Hemen gelecek olan yardımını bağışla bana O tüm zorlukları def edecek Ve umudum olan şeyleri getirecek Ey yakını
Devamı >>

YAZILIM MİMARİSİ ve TASARIM DESENLERİ (Software Architecture and Design Patterns)

Resim
YAZILIM MİMARİSİ NEDİR? Günlük hayatta kullandığımız mimari deyimi üzerinden düşünürsek bir yapının tasarımına ait çok detaylı bir plan şeklinde olduğunu söyleyebiliriz.Aynı durum bir yazılım için de geçerlidir.Kurumsal veya kişisel yazılım projelerimizin bir çok bileşenden oluştuğunu söylemek mümkündür; teknik ihtiyaçlar, performans, tasarım ve güvenlik gibi unsurlar yazılım geliştirme sürecinin daha ilk aşamasında kesinleştirilerek sonraki adımların bu plana göre işlemesi gereklidir.Şöyle bir tanım yapabiliriz: "Yazılımın kalite özelliklerini karşılayacak şekilde yapısal bir çözüm tasarlamaktır." En çok karıştırılan kavramlardan biri de bir yazılım projesinde mimarinin belirlenmesi tasarımdan önce gelir.Yazılımda birden çok design pattern kullanabiliriz fakat mimari tekdir.Özellikle büyük projelerde zaten ihtiyaçları karşılamak için birden fazla tasarım kullanılabilir. Sık kullanılan yazılım mimarilerine bakalım. Layered (n-tier): Örnek olarak MVC'yi
Devamı >>

Facade Design Pattern

Resim
Sık kullanılan tasarım desenlerinden birisidir.Yazıda en basit şekliyle " facade " design pattern'dan bahsetmeye çalışacağım.Belki kod yazarken farkında olmadan kullanmakta olduğunuz bir kalıptır. Kelime anlamı olarak "cephe,dış görünüş" olarak çevirebiliriz.Elimizdeki sınıfları ortak amaçlar için kullandığımız durumları düşünelim. Her class'a yeniden ulaşmak yerine bu class'ları bir cephede toplayıp erişimi kolaylaştırmayı amaçlar. Kısaca birden fazla nesneyi karmaşık bir işlem için kullanmanız gerekiyorsa, bir facade sınıfı yazarak nesneleri bir araya getirip otomatik olarak çağıran bir yapı işimizi kolaylaştıracaktır.Örneğin kullandığımız teknolojilere bakarsak, Web API veya Web servisteki client tarafından erişilebilen yapılarda da facade tasarımını görmek mümkündür. Örnek bir senaryomuz olsun: İstanbulkart'lar için 2 adet üyelik modülümüz bulunsun. Sistem2'ye üyelik için kartın Sistem1'de kara listede olup olmadığına
Devamı >>