본문 바로가기

변환2

빅데이터(?)의 처리하는 방법-3- 안녕하세요? 이번 포스팅에서는 예상치 못하게 그냥 parquet(파케이)형식으로 데이터를 저장한다고 시도를 하다 보니, pyarrow라는 모듈이 필요하다고 나오는 것을 확인할 수 있었습니다. 일단 이게 무엇인지 인터넷을 검색해 보니까, 위 스크린샷과 같이 볼 수 있는데, 일단 저로서는 정확하게 이게 무엇을 하는 라이브러리인지는 잘 모르겠습니다. 하지만, 이게 dask의 데이터프레임을 파케이형식의 파일에 저장하기 위해서는 필요한 라이브러리라는 것 까진 알 수 있었습니다. 그래서 먼저 아나콘다 프롬프트를 실행시킨 다음에, 위 스크린샷에서 나오는 것처럼 conda install pyarrow -c conda -forge라는 명령어를 써서 기존의 환경에 설치를 하도록 합니다. 그런데 오타를 내서 한번 conda.. 2019. 5. 7.
조금은 아쉬운 푸리에 해석에 관한 기사 안녕하세요? 저는 전공이 생명과학 이다 보니, 개인적으로 복잡한 수학에 대해서는 접할 기회가 거의 없기는 없었습니다. 그래서 Newton 2018년 7월호에 싣려 있는 '푸리에 해석(Fourier Analysis)'에 대한 기사를 보았을 때 당장 '푸리에 해석이 뭐지?'라는 의문이 들었습니다. 그래서 호기심에 한번 읽어 보았고 조금은 아쉽기는 하지만, 그래도 유익한 기사라는 생각이 들어서 이 기회에 기사를 리뷰해 보고자 합니다. 먼저 기사는 복잡한 수식을 설명하거나 사전적인 정의를 나타내지 않고, 먼저 '소리'라는 것이 일종의 '파동'이라는 것을 언급하면서 시작을 합니다. 그리고 기사에서는 독자들에게 이 푸리에 해석이라는 것이 얼마나 실생활에 밀접한지 알려주고자, 소리를 분석하는데, 푸리에 해석이 사용된.. 2018. 7. 25.