파이썬 웹사이트에서 주소 파일 다운 받기(rss feed)

오늘은 파이썬에서 RSS feed 내에 있는 enclosures에 있는 첨부 파일을 일괄로 다운받는 방법을 알아보겠습니다. Rss enclosures RSS 인클로저는 음악 추천에 MP3 파일 또는 일기 항목에 사진과 같은 항목과 관련된 파일의 URL을 제공하여 멀티미디어 콘텐츠를 RSS 피드에 첨부하는 방법입니다. 전자 메일 첨부 파일과 달리 인클로저는 파일에 대한 하이퍼링크일 뿐이라고 합니다. 먼저 패키지는 rss를 읽을 feedparser, 그리고 ssl 우회를 위한 ssl 그리고 파일 다운로드를 위한 urllib.request가 필요합니다. 그리고 feedparser를 활용해서 rss를 불러오고 이 후에 rss 내용인 entries에서 enclosures 태그를 빼온 다음 href의 내용을 가져옵..

• format_list_bulleted Programming/Python
• · 2023. 5. 3.
• textsms

노션페이지 클라우드 플레어를 통해 개인 도메인 설정하기

노션은 정말 사용하기 편리한 서비스인데요. 다만 노션페이지의 경우 주소가 복잡하다는 단점이 있습니다. 하지만 이런 것을 해결할 수 있는 간단한 서비스가 있는데요. 클라우드 플레어의 워커를 활용해서 개인도메인을 노션 페이지로 리다이렉션이 가능합니다. 노션? 노션은 2018년에출시한 프로젝트 관리 및 기록 소프트웨어입니다. 에버노트와 같은 저장 기능에 다양한 확장성까지 가지고 있어서 여러모로 사용하기 편리한데요. 특히 많은 분들이 노션을 통해서 생각을 정리하고 협동 프로젝트를 하는데 사용합니다. 노션 개인 도메인 연결하기 먼저 연결하고자 하는 도메인을 클라우드 플레어와 연동해야 합니다. 클라우드플레어에서는 사이트를 추가하고, 웹사이트를 클라우드 플레어가 아닌 곳에서 구매하셨다면 네임서버를 클라우드 플레어의 ..

• format_list_bulleted Programming
• · 2023. 4. 19.
• textsms

Pandas 기존 데이터와 다른 증분 차집합 구하는 방법

오늘은 판다스에서 기존 데이터에서 업데이트 된 증분만을 찾는 방법을 알아보겠습니다. 즉 차집합을 구하는 것인데요. 예를 들어 두개의 엑셀 파일에서 새로운 행만 변경하는 것을 코딩해보도록 하겠습니다. 먼저 폴더에서 xlsx로 된 파일을 찾습니다. 아래의 코드를 통해 file_list2라는 것에 엑셀 파일을 불러옵니다. 그리고 가장 최근의 파일과 [-1] 다음번의 파일인 [-2]를 불러옵니다 #파일 리스트 구하기 file_list1 = os.listdir(allDir) file_list2 = [file for file in file_list1 if file.endswith(".xlsx")] file_list2.sort() df1 = pd.read_excel(allDir+file_list2[-1]) df2 =..

• format_list_bulleted Programming/Python
• · 2023. 4. 17.
• textsms

파이썬 Couldn't find a tree builder with the features you requested: lxml 에러 해결하기

파이썬 코드 작성중 'Couldn't find a tree builder with the features you requested: lxml. Do you need to install a parser library?' 라는 메시지를 만나게 되는데요. 이는 말그대로 lxml이 패키지가 설치되지 않은 것인데요 ======================================== RESTART: C:/pyfile/cr_add_1.py ======================================= Traceback (most recent call last): File "C:/pyfile/cr_add_1.py", line 1, in import feedparser ModuleNotFoundError:..

• format_list_bulleted Programming/Python
• · 2023. 4. 13.
• textsms

cloudflare www redirect(리다이렉트) 설정하기

Cloudflare 사용중에 www가 없는 사이트에 대해서 www로 리다이렉트를 설정해야 하는 경우가 있는데요. 일반적으로 리다이렉트는 서버단에서 설정하는 것이 원칙이지만, 특별한 경우 서버에서 설정이 어려우면 Cloudflare에서 Page Rule을 통해서 설정이 가능합니다. 서버단에서는 nginx 등을 통해 리다이렉트를 시킬 수 있습니다. 또한 티스토리에서는 아래처럼 javascript를 통해 리다이렉트를 시킬 수 있는데요. 2022.11.18 - [Blog] - 티스토리 2차 도메인 등록시 문제점 해결하기(리다이렉션, 댓글) 티스토리 2차 도메인 등록시 문제점 해결하기(리다이렉션, 댓글)티스토리에서 2차 도메인을 등록하게 되면 문제점은 크게 두개의 도메인이 혼재하여 SEO에서 손해보게 됩니다. 티..

• format_list_bulleted IT Trend
• · 2023. 4. 12.
• textsms

AWS Backup을 통해 EC2 백업하기

아마존 AWS를 사용중에 백업이 필요한 경우가 있습니다. AWS에서는 AWS Backup을 통해서 백업을 지원하고 있는데요. AWS 백업하기 AWS 홈에서 AWS Backup페이지로 이동합니다. 이 곳에서 Protected Resource를 클릭합니다. 이후 우측에 있는 Create on-demand backup을 클릭합니다. 이후 Resource type을 VM임 EC2로 하고 백업하고자 하는 EC2를 선택해 줍니다. 이후 백업을 하시면 되는데요. 기한을 설정하거나, * backup window : 백업이 수행될 시간을 정의한다. * Retention Period: 만료 여부를 선택한다. * Backup-vault : 백업이 구성될 백업 볼트를 지정 그리고 완료를 누르면 약 1시간 정도에 백업이 만들어..

• format_list_bulleted Programming
• · 2023. 4. 10.
• textsms