Data/Data Analysis
2018. 12. 20.
[Pyspark] DataFrame 조작 명령어 정리
* Pandas의 DataFrame과는 다른 것이다type을 쳐보면 pyspark의 dataframe인경우: pyspark.sql.dataframe.DataFramepandas의 dataframe인경우: pandas.core.frame.DataFrame 로 나오게 된다. 따라서 pandas에서 썻던 명령어들은 pyspark의 dataframe에 적용이 안된다 Show the Datapyspark를 통해서 읽어들어온 데이터는 show명령어로 dataframe을 볼 수가 있다 dfs.show()+----+------+--------+ |age | id | name | +----+------+--------+ | 25 | 1201 | satish | | 28 | 1202 | krishna| | 39 | 120..
![[Pyspark] DataFrame 조작 명령어 정리](http://i1.daumcdn.net/thumb/C480x320/?fname=https://t1.daumcdn.net/cfile/tistory/999DA6395C3809E520)