반응형

읽기 2

Python을 이용해서 HDFS의 파일 읽어오기

안녕하세요 Dibrary입니다. 이번에는 제가 하둡 클러스터에 올린 파일을 파이썬으로 읽어보겠습니다. 참고로 사용하실 파이썬에는 미리 hdfs 라이브러리가 있어야 하므로 pip install hdfs 를 해 주세요. 제가 사용한 hdfs 버전은 2.7.0 이네요. 해당 라이브러리를 더 상세하게 익히고 사용하고자 하는 분들은 아래 사이트를 참고해주세요. API reference — HdfsCLI 2.5.8 documentation Parameters: url – Hostname or IP address of HDFS namenode, prefixed with protocol, followed by WebHDFS port on namenode. mutual_auth – Whether to enforce mu..

[독서] 책 읽는게 어려운 사람들을 위한 팁 - 1 (메모편)

안녕하세요 Dibrary입니다. 이번에는 책을 좀 더 효율적인 '도구'로 사용하는 방법을 알려드리고자 합니다. 먼저 핵심부터 언급해 드리자면, 책은 반드시 깨끗하게 다뤄야 할 필요가 없습니다. 물론, 누군가는 '나는 책이 깨끗해야 자주 보게 된다'는 분들도 계신데 아래 문장을 기억해 주셨으면 좋겠습니다. 책은 도구일 뿐, 책을 통해 유의미한 결과를 가지는 것은 '자신'입니다. 책을 깨끗이 쓴다는 것은 곧 한 번 읽고 기억을 거의 못하게 된다는 것입니다. 기억력이 초사이언이 아니라면 말이죠. 따라서, 책을 읽고 메모 하는 것을 권해드립니다. 오죽하면 책에 밑줄을 어디 치면서 읽으면 좋은지에 대한 책들도 많이 나와있습니다. p.s. 도서관에서 빌린 책에 메모는 절대 하지 마세요. 이건 불특정 다수에게 피해를..

독서 2022.04.08
반응형