728x90

전체 글 373

[사전교육] 5일차 - 빅데이터 에코시스템 알아보기

사전교육 5일차!! 오늘은 실습때문에 짧지만.... 과제가 많은.. 아주 강렬한 수업이었다. 앞으로 준비해야할 것이 많음을 깨달았던 날...! ✏ 오늘의 숙제 및 커리큘럼 ✏ 22. 빅데이터 자료 얻기 사이트 * 위키독스: https://wikidocs.net/ * 빅데이터 - 스칼라(scala), 스파크(spark)로 시작하기: https://wikidocs.net/book/26793 * Python 데이터 분석 실무: https://wikidocs.net/book/1867 * PYTHON을 이용한 데이터 수집(Crawling): https://ericnjennifer.github.io/python_crawling * 스파크(Spark) 시작하기: https://gritmind.blog/2020/08/..

[사전교육] 4일차 - elk 구축하기 및 빅데이터의 전반적인 내용

사전교육 4일차!! 오늘은 elk구축 및 빅데이터 전반적인 내용의 강의가 시작되었다. ✏ 오늘의 숙제 및 커리큘럼 ✏ 18. 16일 과정 선행 학습 1) 빅데이터 - 하둡,하이브로 시작하기 교재: https://wikidocs.net/22652 2) PPT (빅데이터생태계, 빅데이터 데이터 처리) 19. fastestmirror langpacks 1) #vi /etc/resolv.conf nameserver 168.126.63.1 nameserver 8.8.8.8 :wq! #service network restart 20. 빅데이터 * 도메인 분석 * pre-trained model: 사전학습 된 모델 * 데이터 얻을 수 있는 사이트 - 통합데이터지도: https://www.bigdata-map.kr/ ..

[SQLD] SQLD 43회 합격! 이예! 비전공자 독학 방법 및 후기!😆

뚜둥 - !!!! 43회 SQLD 합격 자격증이다 ㅎ 아.... 감격쓰 문제집에서 보지 못했던 용어들이 나오고, 그와 관련된 문제가 2-3문제나와서 멘붕이었는데 결과가 참 정말로 다행이었다. 독학후기를 자세히 쓰기 전에 먼저, 나의 독학 순서는 이러했다. 1. 이론읽기 1차 - 전체 정독 (데이터의 모델링의 이해 & SQL 기본과 활용) 2. 최신기출문제 풀기 3. 실전모의고사 풀기 4. 이론읽기 2차 - 이해하고 있는지 빠르게 보면서 체크하기 5. 최신기출문제 & 실전모의고사 오답 풀이 독학후기를 자세히 적어보자면!!! 📚 공부교재 책은 영진닷컴에 나오는 이기적 SQL 개발자(SQLD) 를 구입해서 공부했다. 최신기출문제에 대한 동영상강의를 유튜브에서 제공하는데, 아주아주아주 좋다!👍👍👍 문제 해설을 ..

😀 Language/- SQL 2021.12.23

[11721] 열 개씩 끊어 출력하기 / 파이썬 (for반복문)

문제 링크: https://www.acmicpc.net/problem/11721 11721번: 열 개씩 끊어 출력하기 첫째 줄에 단어가 주어진다. 단어는 알파벳 소문자와 대문자로만 이루어져 있으며, 길이는 100을 넘지 않는다. 길이가 0인 단어는 주어지지 않는다. www.acmicpc.net 오랜만에 for 반복문 문제 풀기 ❓ 정답은 ?? 1 2 3 4 5 6 a = input() cyc = (len(a)//10)+1 i = 0 for _ in range(cyc+1): print( a[0+i:10+i] ) i += 10 cs 💯 풀이 과정 1) 몇 번을 돌릴건지 cycle 계산한다. len(a)로 a가 전체 몇개 문자로 되어있는지 확인하고, 10개로 나눈 몫의 +1을 하여 나머지 것도 나올 수 있게 ..

[11718] 그대로 출력하기 / 파이썬 (입력없을 때 멈추기)

문제 링크: https://www.acmicpc.net/problem/11718 11718번: 그대로 출력하기 입력이 주어진다. 입력은 최대 100줄로 이루어져 있고, 알파벳 소문자, 대문자, 공백, 숫자로만 이루어져 있다. 각 줄은 100글자를 넘지 않으며, 빈 줄은 주어지지 않는다. 또, 각 줄은 공백으로 시 www.acmicpc.net 입력되는 것이 없을 때 멈추는 주문이라 할 수 있다! ❓ 정답은 ?? 1 2 3 4 5 6 7 while True: try : a = input() print(a) except : break # except EOFError: break cs 💯 풀이 과정 1) while 문으로 반복을 돌린다. 조건은 True 2) try와 except로 무한 반복을 방지하는데, 3)..

[환경구축] CentOS 설치 시 마우스가 안 빠져나온다면 ?? (호스트키 설정)

너무너무 알려주고 싶은 중요한것!!!!! 별표 ⭐x10000000000000 처음에 고생했던 기억이 나서 꼭 알려주고 싶었다! 현재 이 상황은 컴퓨터 속 컴퓨터로 들어온 것이다.. 그러니 마우스가 이 밖을 벗어날 수 없다!!! 이럴 때 어떡하느냐! 호스트키를 지정해줘야한다! 호스트키를 누르면 밖으로 마우스가 뿅! 나올 수가 있다. 들어갈 때는 맘대로 들어갔어도 나올 때는 맘대로 나갈 수 없다... 이 호스트키를 눌러줘야한다!! 처음에 밖으로 빠져나오는 방법은!!! 작업관리자 단축키!! Ctrl + Alt + Delete 키를 눌러서 작업관리자 창을 열게되면 마우스가 빠져나온다. 이제 본격적으로 호스트키 설정 1. [입력] > [키보드] > [키보드설정] 클릭 2. [입력] 클릭한 후, 호스트 키 조합의 ..

[환경구축] VirtualBox CentOS7 에서 가상환경 만들기!! (호스트키 설정까지!)

VirtualBox를 설치하셨나요??? 그렇다면 이제 CentOS를 설치할 차례이군요!!!!!!!! 하핫🤭 어서오세용! 하나하나 캡쳐 해놨답니다!! 현재 최신버전으로 OS 8버젼이 나왔다고는 하지만!!!!!!!!!!!!! 그래도 현업에서는 OS 7을 많이 사용하고 있으니, OS 7로 설치 진행해볼까용?? CentOS는 쉽게 말하자면 VirtualBox란 가상환경아래에 윈도우같은 걸 만든다고 생각하면 됩니다! 1. CentOS7 파일 다운로드 잠시만요~ 다운부터 하고 가실게요~(하...ㅋㅋㅋ 갑자기 생각난 개콘 유행어) 1) CentOS 공홈에서 Download를 들어간다.(https://www.centos.org/download/) 2) 컴퓨터 환경에 맞춰, LINUX & OS7 & 윈도우x86_64를 ..

[ELK] ELK활용 미니프로젝트 - 데이터 전처리 (feat. pandas)

💻 데이터 전처리 내려받은 자료는 내가 원하는 필터링을 거쳐 수집이 가능하긴 했지만 아쉽게도 내가 원하는 형태로는 수집받지 못했다...😥 그러니 이럴 때 필요한 건 뭐다?? 데이터 전처리!!!!! 다행히 pandas 공부를 조금 했어서 데이터 전처리를 통해 원하는 형태를 만들 수 있었다. 바로바로 디버깅을 하면서 처리가 잘되어 가고 있나 화인하기 위해, 바로 VS code로 작성하지 않고 colab을 사용하여 확인하면서 전처리를 해나갔다. 전처리 1차로는 형식으로 데이터 프레임을 뽑고 전처리 2차로는 형식으로 데이터 프레임을 뽑을 것이다. ** Github에 들어가면 중간중간 실행결과가 뜨니 꼭 들어가 참고해보길 바란다!! df1(연도별): https://git..

[ELK] ELK활용 미니프로젝트 - 데이터 수집( KOSIS 국가통계포털)

💻 데이터 수집 계획했던 대로 KOSIS 국가통계포털에 들어가 인구동향 - 출생 자료를 조회하였다. 이 자료는 월/분기/연도 별로 출생/사망/혼인/이혼을 알수있는 종합 인구동향 데이터였다. 그래서인지 원하는 자료를 필터링해서 받을 수 있었는데, 1. 행정구역별 : 전국 2. 종류별 : 출생아수(명) 3. 시점 : 1985.01~ 2020.12 🤞🍀

728x90