---
# System prepended metadata

title: 0918雲端大數據分析

---

# 0918雲端大數據分析

[python+spark+hadoop課程](http://pythonsparkhadoop.blogspot.com/)

## 雲端
雲端->HDFS->Map reduce
Hadoop是一個框架，使用分散檔案系統(HDPS)，透過主僕節點提供運算

## 機器學習
機率->理論模型->A在B下發生的機率->regression回歸
y = f(x)
x->自變數 y->因變數
feature:風向、溫度、季節
label:是否降雨(二分法)、預測氣候(多元分類)

## 讀paper工具
[Explain paper](https://www.explainpaper.com/)
[Open reader](https://www.openread.academy/zh)
[Researchrabbit](https://www.researchrabbit.ai/)
[Readthispaper](https://readthispaper.com/tw)
[Poe](https://poe.com)
[Consensus](https://consensus.app/)