leestott
9d4c123295
|
11 months ago | |
|---|---|---|
| .. | ||
| README.md | 11 months ago | |
| assignment.md | 11 months ago | |
README.md
Gerçek Dünyada Veri Bilimi
 |
|---|
| Gerçek Dünyada Veri Bilimi - Sketchnote by @nitya |
Bu öğrenme yolculuğunun sonuna yaklaşıyoruz!
Veri biliminin ve etiğin tanımlarıyla başladık, veri analizi ve görselleştirme için çeşitli araçlar ve teknikleri keşfettik, veri bilimi yaşam döngüsünü gözden geçirdik ve bulut bilişim hizmetleriyle veri bilimi iş akışlarını ölçeklendirme ve otomatikleştirme konularına baktık. Muhtemelen şu soruyu soruyorsunuz: "Tüm bu öğrendiklerimi gerçek dünya bağlamlarına nasıl uyarlayabilirim?"
Bu derste, veri biliminin endüstrideki gerçek dünya uygulamalarını keşfedeceğiz ve araştırma, dijital beşeri bilimler ve sürdürülebilirlik bağlamlarında belirli örneklere dalacağız. Öğrenci proje fırsatlarına bakacağız ve öğrenme yolculuğunuzu devam ettirmenize yardımcı olacak faydalı kaynaklarla sonlandıracağız!
Ders Öncesi Test
Veri Bilimi + Endüstri
Yapay zekanın demokratikleşmesi sayesinde, geliştiriciler artık yapay zeka destekli karar verme ve veri odaklı içgörüleri kullanıcı deneyimlerine ve geliştirme iş akışlarına entegre etmeyi daha kolay buluyor. İşte veri biliminin endüstrideki gerçek dünya uygulamalarına nasıl "uygulandığına" dair birkaç örnek:
-
Google Flu Trends arama terimlerini grip trendleriyle ilişkilendirmek için veri bilimi kullandı. Yaklaşımın kusurları olsa da, veri odaklı sağlık tahminlerinin olasılıkları (ve zorlukları) konusunda farkındalık yarattı.
-
UPS Routing Predictions - UPS'in hava durumu koşulları, trafik desenleri, teslimat süreleri ve daha fazlasını dikkate alarak teslimat için en uygun rotaları tahmin etmek için veri bilimi ve makine öğrenimini nasıl kullandığını açıklar.
-
NYC Taxicab Route Visualization - Bilgi Edinme Özgürlüğü Yasaları kullanılarak toplanan veriler, NYC taksilerinin yoğun şehirde nasıl gezindiğini, kazandıkları parayı ve her 24 saatlik dönemdeki yolculuk sürelerini anlamamıza yardımcı olan bir günün görselleştirilmesine yardımcı oldu.
-
Uber Data Science Workbench - günlük olarak milyonlarca Uber yolculuğundan toplanan verileri (alım ve bırakma konumları, yolculuk süresi, tercih edilen rotalar vb.) kullanarak fiyatlandırma, güvenlik, dolandırıcılık tespiti ve navigasyon kararları için bir veri analitik aracı oluşturur.
-
Sports Analytics - öngörücü analitik (takım ve oyuncu analizi - Moneyball düşünün - ve hayran yönetimi) ve veri görselleştirme (takım ve hayran panoları, oyunlar vb.) ile yetenek avı, spor bahisleri ve envanter/alan yönetimi gibi uygulamalara odaklanır.
-
Data Science in Banking - finans sektöründe veri biliminin değerini risk modelleme ve dolandırıcılık tespitinden müşteri segmentasyonu, gerçek zamanlı tahmin ve öneri sistemlerine kadar uzanan uygulamalarla vurgular. Öngörücü analitik ayrıca kredi puanları gibi kritik önlemleri yönlendirir.
-
Data Science in Healthcare - tıbbi görüntüleme (örneğin, MRI, X-Ray, CT-Scan), genomik (DNA dizilimi), ilaç geliştirme (risk değerlendirmesi, başarı tahmini), öngörücü analitik (hasta bakımı ve tedarik lojistiği), hastalık takibi ve önleme gibi uygulamaları vurgular.
Görsel Kaynağı: Data Flair: 6 Amazing Data Science Applications
Şekil, veri bilimi tekniklerini uygulamak için diğer alanları ve örnekleri göstermektedir. Diğer uygulamaları keşfetmek ister misiniz? Aşağıdaki Gözden Geçirme ve Kendi Kendine Çalışma bölümüne göz atın.
Veri Bilimi + Araştırma
 |
|---|
| Veri Bilimi & Araştırma - Sketchnote by @nitya |
Gerçek dünya uygulamaları genellikle ölçekli endüstri kullanım durumlarına odaklanırken, araştırma uygulamaları ve projeleri iki açıdan faydalı olabilir:
- yenilik fırsatları - ileri konseptlerin hızlı prototiplenmesini ve gelecek nesil uygulamalar için kullanıcı deneyimlerinin test edilmesini keşfetmek.
- uygulama zorlukları - veri bilimi teknolojilerinin gerçek dünya bağlamlarında potansiyel zararlarını veya istenmeyen sonuçlarını araştırmak.
Öğrenciler için bu araştırma projeleri, hem öğrenme hem de iş birliği fırsatları sağlayarak konuyu daha iyi anlamalarını ve ilgi alanlarında çalışan ilgili kişiler veya ekiplerle farkındalıklarını ve etkileşimlerini genişletmelerini sağlayabilir. Peki araştırma projeleri nasıl görünür ve nasıl bir etki yaratabilir?
Bir örneğe bakalım - Joy Buolamwini (MIT Media Labs) tarafından yapılan MIT Gender Shades Study ve Timnit Gebru (o zamanlar Microsoft Research'te) ile birlikte yazılan imza araştırma makalesi:
- Ne: Araştırma projesinin amacı, otomatik yüz analizi algoritmalarında ve veri setlerinde cinsiyet ve cilt tipi temelinde mevcut önyargıyı değerlendirmekti.
- Neden: Yüz analizi, kolluk kuvvetleri, havaalanı güvenliği, işe alım sistemleri gibi alanlarda kullanılır - yanlış sınıflandırmalar (örneğin, önyargı nedeniyle) etkilenen bireyler veya gruplar için potansiyel ekonomik ve sosyal zararlar yaratabilir. Önyargıları anlamak (ve ortadan kaldırmak veya hafifletmek) kullanımda adalet için önemlidir.
- Nasıl: Araştırmacılar, mevcut ölçütlerin ağırlıklı olarak açık tenli denekleri kullandığını fark etti ve cinsiyet ve cilt tipi açısından daha dengeli olan yeni bir veri seti (1000+ görüntü) oluşturdu. Veri seti, üç cinsiyet sınıflandırma ürününün (Microsoft, IBM ve Face++'tan) doğruluğunu değerlendirmek için kullanıldı.
Sonuçlar, genel sınıflandırma doğruluğunun iyi olmasına rağmen, çeşitli alt gruplar arasında hata oranlarında belirgin bir fark olduğunu gösterdi - yanlış cinsiyetlendirme kadınlar veya koyu tenli kişiler için daha yüksek olup, önyargıya işaret ediyordu.
Anahtar Sonuçlar: Veri biliminin daha temsil edici veri setlerine (dengeli alt gruplar) ve daha kapsayıcı ekiplere (çeşitli geçmişler) ihtiyaç duyduğunu, bu tür önyargıları yapay zeka çözümlerinde daha erken tanımak ve ortadan kaldırmak veya hafifletmek için farkındalık yarattı. Bu tür araştırma çabaları, birçok kuruluşun yapay zeka ürünleri ve süreçlerinde adaleti artırmak için sorumlu yapay zeka ilkelerini ve uygulamalarını tanımlamasında da etkili oldu.
Microsoft'taki ilgili araştırma çabalarını öğrenmek ister misiniz?
- Microsoft Research Projects adresinde Yapay Zeka üzerine araştırma projelerine göz atın.
- Microsoft Research Data Science Summer School adresinden öğrenci projelerini keşfedin.
- Fairlearn projesine ve Responsible AI girişimlerine göz atın.
Veri Bilimi + Beşeri Bilimler
 |
|---|
| Veri Bilimi & Dijital Beşeri Bilimler - Sketchnote by @nitya |
Dijital Beşeri Bilimler şöyle tanımlanmıştır: "insani sorgulama ile hesaplama yöntemlerini birleştiren bir uygulama ve yaklaşım koleksiyonu". Stanford projeleri gibi "tarihi yeniden başlatma" ve "şiirsel düşünme" Dijital Beşeri Bilimler ve Veri Bilimi arasındaki bağlantıyı vurgular - ağ analizi, bilgi görselleştirme, mekansal ve metin analizi gibi tekniklerin tarihi ve edebi veri setlerini yeniden ziyaret ederek yeni içgörüler ve perspektifler elde etmemize nasıl yardımcı olabileceğini gösterir.
Bu alanda bir projeyi keşfetmek ve genişletmek ister misiniz?
"Emily Dickinson and the Meter of Mood" - Jen Looper tarafından harika bir örnek - tanıdık şiirleri yeniden ziyaret etmek ve anlamını ve yazarının katkılarını yeni bağlamlarda yeniden değerlendirmek için veri bilimi kullanmayı sorar. Örneğin, bir şiirin tonu veya duygusunu analiz ederek hangi mevsimde yazıldığını tahmin edebilir miyiz - ve bu, yazarın ilgili dönemdeki ruh hali hakkında bize ne anlatır?
Bu soruyu yanıtlamak için veri bilimi yaşam döngüsünün adımlarını takip ediyoruz:
Veri Toplama- analiz için ilgili bir veri seti toplamak. Seçenekler arasında bir API kullanmak (örneğin, Poetry DB API) veya web sayfalarını kazımak (örneğin, Project Gutenberg) gibi araçlar kullanmak bulunur.Veri Temizleme- metnin nasıl biçimlendirilebileceğini, temizlenebileceğini ve basitleştirilebileceğini temel araçlar kullanarak açıklar (örneğin, Visual Studio Code ve Microsoft Excel).Veri Analizi- veri setini "Notebooks" içine aktararak Python paketleri (örneğin, pandas, numpy ve matplotlib) kullanarak veriyi düzenleme ve görselleştirme işlemini açıklar.Duygu Analizi- bulut hizmetlerini (örneğin, Text Analytics) düşük kodlu araçlar (örneğin, Power Automate) kullanarak otomatik veri işleme iş akışları için nasıl entegre edebileceğimizi açıklar.
Bu iş akışını kullanarak şiirlerin duygularındaki mevsimsel etkileri keşfedebilir ve yazar hakkında kendi perspektiflerimizi oluşturabiliriz. Kendiniz deneyin - ardından veri setini analiz etmek veya görselleştirmek için not defterini genişletin!
Bu sorgulama yollarını takip etmek için Dijital Beşeri Bilimler araç seti içindeki bazı araçları kullanabilirsiniz.
Veri Bilimi + Sürdürülebilirlik
 |
|---|
| Veri Bilimi & Sürdürülebilirlik - Sketchnote by @nitya |
2030 Sürdürülebilir Kalkınma Gündemi - 2015 yılında tüm Birleşmiş Milletler üyeleri tarafından kabul edilen - Gezegeni Koruma ve iklim değişikliğinin etkilerinden korunma gibi 17 hedefi tanımlar. Microsoft Sürdürülebilirlik girişimi, karbon negatif, su pozitif, sıfır atık ve biyolojik çeşitlilik hedeflerine odaklanarak bu hedefleri destekler ve daha sürdürülebilir bir gelecek inşa etmek için teknoloji çözümlerini keşfeder.
Bu zorlukları ölçeklenebilir ve zamanında ele almak, bulut ölçeğinde düşünmeyi ve büyük ölçekli veriyi gerektirir. Planetary Computer girişimi, veri bilimciler ve geliştiricilere bu çabada yardımcı olmak için 4 bileşen sunar:
-
Veri Kataloğu - Dünya Sistemleri verileriyle (ücretsiz ve Azure barındırmalı) petabaytlarca veri.
-
Planetary API - kullanıcıların uzay ve zaman boyunca ilgili verileri aramasına yardımcı olur.
-
Hub - bilim insanları için büyük ölçekli coğrafi veri setlerini işlemek için yönetilen bir ortam.
-
Uygulamalar - sürdürülebilirlik içgörüleri için kullanım durumlarını ve araçları sergiler. Gezegen Bilgisayarı Projesi şu anda önizleme aşamasında (Eylül 2021 itibarıyla) - veri bilimi kullanarak sürdürülebilirlik çözümlerine katkıda bulunmaya nasıl başlayabileceğinizi öğrenin.
-
Keşfe başlamak ve diğer kişilerle bağlantı kurmak için Erişim talep edin.
-
Desteklenen veri setlerini ve API'leri anlamak için Dokümantasyonu keşfedin.
-
Uygulama fikirleri için Ekosistem İzleme gibi uygulamaları inceleyin.
Veri görselleştirmeyi, iklim değişikliği ve ormansızlaşma gibi alanlarda ilgili içgörüleri ortaya çıkarmak veya güçlendirmek için nasıl kullanabileceğinizi düşünün. Ya da içgörülerin, daha sürdürülebilir bir yaşam için davranış değişikliklerini motive eden yeni kullanıcı deneyimleri oluşturmak için nasıl kullanılabileceğini düşünün.
Veri Bilimi + Öğrenciler
Endüstri ve araştırmadaki gerçek dünya uygulamalarından bahsettik ve dijital beşeri bilimler ile sürdürülebilirlikte veri bilimi uygulama örneklerini inceledik. Peki, veri bilimi başlangıç seviyesindeki öğrenciler olarak becerilerinizi nasıl geliştirebilir ve uzmanlığınızı nasıl paylaşabilirsiniz?
İşte ilham almanız için bazı veri bilimi öğrenci projeleri örnekleri:
- GitHub projeleri ile MSR Veri Bilimi Yaz Okulu, şu konuları keşfediyor:
- Malzeme Kültürünü Dijitalleştirme: Sirkap'taki sosyo-ekonomik dağılımları keşfetmek - Ornella Altunyan ve Claremont'taki ekibinden, ArcGIS StoryMaps kullanarak.
🚀 Meydan Okuma
Başlangıç seviyesine uygun veri bilimi projelerini öneren makaleler arayın - örneğin bu 50 konu alanı, bu 21 proje fikri veya kaynak kodlu bu 16 proje gibi. Öğrenme yolculuklarınızı blog yazılarıyla paylaşmayı ve içgörülerinizi bizimle paylaşmayı unutmayın.
Ders Sonrası Quiz
Ders sonrası quiz
Gözden Geçirme ve Kendi Kendine Çalışma
Daha fazla kullanım senaryosu keşfetmek ister misiniz? İşte birkaç ilgili makale:
- 17 Veri Bilimi Uygulaması ve Örnekleri - Temmuz 2021
- Gerçek Dünyada 11 Nefes Kesici Veri Bilimi Uygulaması - Mayıs 2021
- Gerçek Dünyada Veri Bilimi - Makale Koleksiyonu
- Veri Bilimi Şu Alanlarda: Eğitim, Tarım, Finans, Filmler ve daha fazlası.
Ödev
Bir Gezegen Bilgisayarı Veri Setini Keşfedin
Feragatname:
Bu belge, AI çeviri hizmeti Co-op Translator kullanılarak çevrilmiştir. Doğruluk için çaba göstersek de, otomatik çevirilerin hata veya yanlışlık içerebileceğini lütfen unutmayın. Belgenin orijinal dili, yetkili kaynak olarak kabul edilmelidir. Kritik bilgiler için profesyonel insan çevirisi önerilir. Bu çevirinin kullanımından kaynaklanan yanlış anlamalar veya yanlış yorumlamalardan sorumlu değiliz.