9.8 KiB
Pagpapakahulugan ng Data
 |
|---|
| Pagpapakahulugan ng Data - Sketchnote ni @nitya |
Ang data ay mga katotohanan, impormasyon, obserbasyon, at sukat na ginagamit upang makagawa ng mga tuklas at suportahan ang mga desisyong may kaalaman. Ang isang data point ay isang yunit ng data sa loob ng isang dataset, na koleksyon ng mga data point. Ang mga dataset ay maaaring dumating sa iba't ibang format at istruktura, at karaniwang nakabatay sa pinagmulan nito, o kung saan nagmula ang data. Halimbawa, ang buwanang kita ng isang kumpanya ay maaaring nasa spreadsheet ngunit ang oras-oras na data ng heart rate mula sa isang smartwatch ay maaaring nasa format na JSON. Karaniwan para sa mga data scientist na magtrabaho sa iba't ibang uri ng data sa loob ng isang dataset.
Ang araling ito ay nakatuon sa pagkilala at pag-uuri ng data batay sa mga katangian nito at mga pinagmulan.
Pre-Lecture Quiz
Paano Inilalarawan ang Data
Raw Data
Ang raw data ay data na nagmula sa pinagmulan nito sa orihinal na estado at hindi pa nasusuri o naayos. Upang maunawaan kung ano ang nangyayari sa isang dataset, kailangang ayusin ito sa isang format na mauunawaan ng tao pati na rin ng teknolohiyang maaaring gamitin upang masuri ito nang higit pa. Ang istruktura ng isang dataset ay naglalarawan kung paano ito naayos at maaaring uriin bilang structured, unstructured, at semi-structured. Ang mga uri ng istruktura na ito ay mag-iiba depende sa pinagmulan ngunit sa huli ay magkasya sa tatlong kategoryang ito.
Quantitative Data
Ang quantitative data ay mga numerikal na obserbasyon sa loob ng isang dataset at karaniwang maaaring suriin, sukatin, at gamitin sa matematika. Ilang halimbawa ng quantitative data ay: populasyon ng isang bansa, taas ng isang tao, o kita ng isang kumpanya kada quarter. Sa karagdagang pagsusuri, ang quantitative data ay maaaring gamitin upang matuklasan ang mga seasonal trend ng Air Quality Index (AQI) o tantiyahin ang posibilidad ng trapiko sa rush hour sa isang tipikal na araw ng trabaho.
Qualitative Data
Ang qualitative data, na kilala rin bilang categorical data, ay data na hindi maaaring sukatin nang objektibo tulad ng mga obserbasyon ng quantitative data. Karaniwan itong iba't ibang format ng subjective na data na naglalarawan sa kalidad ng isang bagay, tulad ng isang produkto o proseso. Minsan, ang qualitative data ay numerikal ngunit hindi karaniwang ginagamit sa matematika, tulad ng mga numero ng telepono o mga timestamp. Ilang halimbawa ng qualitative data ay: mga komento sa video, make at model ng isang kotse, o paboritong kulay ng pinakamalapit mong kaibigan. Ang qualitative data ay maaaring gamitin upang maunawaan kung aling mga produkto ang pinakagusto ng mga consumer o upang matukoy ang mga sikat na keyword sa mga resume ng aplikasyon sa trabaho.
Structured Data
Ang structured data ay data na naayos sa mga row at column, kung saan ang bawat row ay magkakaroon ng parehong set ng column. Ang mga column ay kumakatawan sa isang halaga ng partikular na uri at makikilala sa isang pangalan na naglalarawan kung ano ang kinakatawan ng halaga, habang ang mga row ay naglalaman ng aktwal na mga halaga. Ang mga column ay madalas na may partikular na set ng mga panuntunan o limitasyon sa mga halaga, upang matiyak na ang mga halaga ay tumpak na kumakatawan sa column. Halimbawa, isipin ang isang spreadsheet ng mga customer kung saan ang bawat row ay dapat may numero ng telepono at ang mga numero ng telepono ay hindi kailanman naglalaman ng mga alpabetikong karakter. Maaaring may mga panuntunang inilapat sa column ng numero ng telepono upang matiyak na hindi ito kailanman walang laman at naglalaman lamang ng mga numero.
Ang isang benepisyo ng structured data ay maaari itong maayos sa paraang maaaring maiugnay ito sa iba pang structured data. Gayunpaman, dahil ang data ay idinisenyo upang maayos sa isang partikular na paraan, ang paggawa ng mga pagbabago sa pangkalahatang istruktura nito ay maaaring mangailangan ng malaking pagsisikap. Halimbawa, ang pagdaragdag ng email column sa spreadsheet ng customer na hindi maaaring walang laman ay nangangahulugan na kailangan mong alamin kung paano mo idaragdag ang mga halagang ito sa mga umiiral na row ng mga customer sa dataset.
Mga halimbawa ng structured data: spreadsheets, relational databases, mga numero ng telepono, mga bank statement.
Unstructured Data
Ang unstructured data ay karaniwang hindi maaaring ikategorya sa mga row o column at walang format o set ng mga panuntunan na susundin. Dahil ang unstructured data ay may mas kaunting mga limitasyon sa istruktura nito, mas madali itong magdagdag ng bagong impormasyon kumpara sa isang structured dataset. Halimbawa, kung ang isang sensor na kumukuha ng data sa barometric pressure tuwing 2 minuto ay nakatanggap ng update na ngayon ay pinapayagan itong sukatin at i-record ang temperatura, hindi nito kailangang baguhin ang umiiral na data kung ito ay unstructured. Gayunpaman, maaaring mas matagal ang pagsusuri o pagsisiyasat sa ganitong uri ng data. Halimbawa, isang siyentipiko na gustong hanapin ang average na temperatura ng nakaraang buwan mula sa data ng sensor, ngunit natuklasan na ang sensor ay nag-record ng "e" sa ilan sa mga naitala nitong data upang ipahiwatig na ito ay nasira sa halip na isang tipikal na numero, na nangangahulugang hindi kumpleto ang data.
Mga halimbawa ng unstructured data: text files, text messages, video files.
Semi-structured
Ang semi-structured data ay may mga katangian na ginagawa itong kumbinasyon ng structured at unstructured data. Karaniwan itong hindi sumusunod sa format ng mga row at column ngunit naayos sa paraang itinuturing na structured at maaaring sumunod sa isang nakatakdang format o set ng mga panuntunan. Ang istruktura ay mag-iiba sa pagitan ng mga pinagmulan, tulad ng isang mahusay na tinukoy na hierarchy sa isang bagay na mas flexible na nagpapahintulot sa madaling pagsasama ng bagong impormasyon. Ang metadata ay mga tagapagpahiwatig na tumutulong sa pagpapasya kung paano naayos at iniimbak ang data at magkakaroon ng iba't ibang pangalan, batay sa uri ng data. Ilang karaniwang pangalan para sa metadata ay tags, elements, entities, at attributes. Halimbawa, ang isang tipikal na email message ay magkakaroon ng subject, body, at isang set ng mga recipient at maaaring ayusin batay sa kung sino o kailan ito ipinadala.
Mga halimbawa ng semi-structured data: HTML, CSV files, JavaScript Object Notation (JSON).
Mga Pinagmulan ng Data
Ang pinagmulan ng data ay ang paunang lokasyon kung saan nabuo ang data, o kung saan ito "nakatira" at mag-iiba batay sa kung paano at kailan ito nakolekta. Ang data na nabuo ng mga user nito ay kilala bilang primary data habang ang secondary data ay nagmumula sa isang pinagmulan na nangolekta ng data para sa pangkalahatang paggamit. Halimbawa, ang isang grupo ng mga siyentipiko na nangongolekta ng mga obserbasyon sa isang rainforest ay ituturing na primary at kung magpasya silang ibahagi ito sa ibang mga siyentipiko, ito ay ituturing na secondary sa mga gumagamit nito.
Ang mga database ay isang karaniwang pinagmulan at umaasa sa isang database management system upang i-host at panatilihin ang data kung saan gumagamit ang mga user ng mga command na tinatawag na queries upang galugarin ang data. Ang mga file bilang mga pinagmulan ng data ay maaaring audio, image, at video files pati na rin ang mga spreadsheet tulad ng Excel. Ang mga internet sources ay isang karaniwang lokasyon para sa pagho-host ng data, kung saan ang mga database pati na rin ang mga file ay matatagpuan. Ang application programming interfaces, na kilala rin bilang APIs, ay nagpapahintulot sa mga programmer na lumikha ng mga paraan upang magbahagi ng data sa mga external na user sa pamamagitan ng internet, habang ang proseso ng web scraping ay kumukuha ng data mula sa isang web page. Ang mga aralin sa Working with Data ay nakatuon sa kung paano gamitin ang iba't ibang pinagmulan ng data.
Konklusyon
Sa araling ito natutunan natin:
- Ano ang data
- Paano inilalarawan ang data
- Paano inuuri at ikinategorya ang data
- Saan matatagpuan ang data
🚀 Hamon
Ang Kaggle ay isang mahusay na pinagmulan ng mga open datasets. Gamitin ang dataset search tool upang makahanap ng ilang kawili-wiling datasets at uriin ang 3-5 datasets gamit ang pamantayang ito:
- Ang data ba ay quantitative o qualitative?
- Ang data ba ay structured, unstructured, o semi-structured?
Post-Lecture Quiz
Review & Self Study
- Ang Microsoft Learn unit na ito, na pinamagatang Classify your Data ay may detalyadong breakdown ng structured, semi-structured, at unstructured data.
Assignment
Paunawa:
Ang dokumentong ito ay isinalin gamit ang AI translation service na Co-op Translator. Bagama't sinisikap naming maging tumpak, pakatandaan na ang mga awtomatikong pagsasalin ay maaaring maglaman ng mga pagkakamali o hindi pagkakatugma. Ang orihinal na dokumento sa kanyang katutubong wika ang dapat ituring na opisyal na sanggunian. Para sa mahalagang impormasyon, inirerekomenda ang propesyonal na pagsasalin ng tao. Hindi kami mananagot sa anumang hindi pagkakaunawaan o maling interpretasyon na dulot ng paggamit ng pagsasaling ito.