소소한 블로그

python 3.9 version까지는 잘 설치했는데, 일부 사용하던 패키지가 M1 맥북에서 설치되지 않았다. 각종 방법을 동원했는데 결국 아직 지원이 안되기 때문이고, 로제타2를 이용해야한다. 터미널앱 우클릭 > 정보가져오기 Rosetta를 사용하여 열기에 체크해두기! pandas도 설치 오류가 났었는데, 이제 잘 설치된다~ 이상. 이제 설치 못한 것들 설치하러 가야지~

다음주면 CES 관련 뉴스가 쏟아질 듯 하여, 하루에 한 번 씩 CES관련 뉴스를 크롤링하는 코드를 만들어뒀다. 나중에 키워드만 쓱 바꾸면 다른 주제로도 잘 써먹을 수 있을 듯! 1. CES 키워드로 네이버 뉴스탭에 나오는 뉴스를 크롤링한다 2. 네이버 뉴스는 알아서 클러스터링되기 때문에, 동일주제는 1개 뉴스만 가져온다 3. 페이징 처리가 되어있기 때문에 1페이지부터 10페이지까지 수집한다 4. 어제자 수집 파일과 비교하여 새로운 url만 수집한다 1. csv파일명에 날짜 넣기 2. 날짜 조작 (어제, 오늘 등) 3. pandas 컬럼명 변경 4. pandas 컬럼 삭제(drop) 5. pandas index 삭제, 초기화 ( reset) 6. pandas left join 7. pandas 중복 값 ..