반응형 전체 글126 맥에서 사파리를 이용한 셀레니움 활용 시 원격 자동화 허용 하는 법 매번 크롬으로 셀레니움을 활용했는데 매번 크롬 업데이트 할 때마다 웹 드라이버는 바로 업데이트를 하지 않는 통에 몇몇일을 작업도 못하고 버리는 경우가 많았습니다. 맥북을 쓰고 있음에도 윈도우 환경에 아직도 익숙한 난 사파리를 활용할 생각조차 하지 않았는데요. 우연한 기회에 맥에서 크롤링 작업 시 사파리 브라우저가 더욱 간편하다는 것을 알고 설정을 변경 중입니다. 맥에는 사파리가 자동으로 설치되어 있기 때문에 크롤링을 활용하기 위한 설정만 하면 됩니다. 원격 자동화 허용하는 법 원격 자동화 허용을 진행하다 하도 헤메는 통에 이렇게 포스팅을 남겨봅니다. 우선 사파리의 설정은 다음과 같이 이동합니다. 크롬이나 엣지와는 다르죠~ 상단 애플로드 옆 Safari를 클릭하고 설정으로 이동합니다. 고급 탭으로 이동해서.. 2023. 7. 21. OpenAI 활용하여 자동포스팅에 활용해볼까 import openai openai.api_key = 'YOUR_API_KEY' def chat_with_model(message): response = openai.Completion.create( engine='text-davinci-003', # 사용할 엔진 선택 prompt=message, max_tokens=50, # 출력 텍스트의 최대 길이 n=1, # 생성할 텍스트의 수 stop=None, # 생성을 멈추는 토큰 temperature=0.7, # 다양성 조절 timeout=10 # API 호출 제한 시간 ) return response.choices[0].text.strip() user_message = input("사용자: ") while user_message.lower() != "끝".. 2023. 6. 14. 파이썬 자동포스팅 위한 필수 pip 라이브러리 전적으로 내가 사용하는 것들입니다. 기억력 순단 때문에 정리가 늘 필요합니다. 관심있는 분들은 한번 눈여겨 봐주세용! 맥북으로 코딩하다가 윈도우 환경에서 작업하는 와중 다시 설치하면서 간략 정리중입니다. requests pip install requests 크롤링을 위한 필수 라이브러리 selenium pip install selenium requests 보단 속도가 느리지만 다양한 기능을 제공하는 라이브러리 requests와 조합하여 쓰면 좋다 user-agent pip install user-agent 크롤링을 하다 bot으로 인식되면 디나이되기 일쑤이다. 이 라이브러리를 사용하면 끊김없이 크롤링이 사용가능하다. python-wordpress_xmlrpc pip install python-wordpr.. 2023. 6. 5. 워드프레스 REST API 를 활용하여 자동포스팅하는 방법 파이썬 워드프레스 REST API 활용방법 아래의 코드 예제는 파이썬에서 이미지 첨부와 메타데이터 설정을 포함한 워드프레스 포스팅을 생성하는 방법을 보여줍니다. 코드 실행 전에 requests 라이브러리가 설치되어 있는지 확인해주세요. import requests import json # 워드프레스 REST API 엔드포인트 URL url = 'https://your-wordpress-site/wp-json/wp/v2/media' # 이미지 업로드 image_path = 'path/to/your/image.jpg' files = {'file': open(image_path, 'rb')} auth = ('your-username', 'your-password') response = requests.post.. 2023. 6. 2. openai 를 활용하여 포스팅하기 첫번째! openAI 를 활용하여 블로그 포스팅을 진행해보려고 합니다. 날로 먹겠단 이야기죠. 먼저 openai.com을 접속해서 api key를 받아야 하더라구요. 무료로 진행해봅니다. OpenAI 홈페이지 로그인 후 API를 클릭합니다. 우측 상단 내 아이콘을 클릭하면 리스트를 볼 수 있는데 여기서 View API Keys를 클릭합니다. Create new secret key를 누르고 키를 생성합니다. 생성한 키는 아무도 알려주지 마시고 본인만 아는 곳에 저장해둡니다. 이후 코딩할 때 키값을 넣어 OpenAI를 호출할 때 사용합니다. 이로써 OpenAI를 이용한 블로그 포스팅 날로 먹기 프로젝트를 시작해보겠습니다. 2023. 6. 2. 잘 되던 쥬피터노트북이 안될 때 해결방법 파이썬 개발환경에서 소스코드를 테스트하기 위해 쥬피터노트북을 많이 사용하실 겁니다. 오랜만에 코딩 좀 하려고 잡았는데 이놈이 계속 말썽인 겁니다. 해당 에러를 뿜으며 나를 괴롭히네요;;; 해결방법은 간단했습니다. 해결방법 너무 간만에 접속해서인가 업데이트를 하지 않아서 생긴 오류였습니다. 해결방법은 플러그인에서 주피터를 업그레이드해주면 간단하게 해결됩니다. 확장 탭에서 쥬피터 클릭 후 switch to realease version을 클릭하시고 VScode 재부팅하시면 끝! 2023. 3. 28. 자동포스팅을 위한 파이썬-PANDAS 사용 데이터 저장방법 바로 업로드 쿠팡 상품 데이터를 추출하여 배열로 받은 다음 바로 글을 등록하는 방식으로 자동포스팅을 진행해왔는데요. 문제점이 몇가지 발견되었고 데이터를 관리할 필요가 있어 추출한 데이터를 저장하는 방식으로 변경 및 저장된 데이터를 하나씩 긁어와서 포스팅하는 방식으로 변경하려고 개발 중에 있습니다. PANDAS pandas 라이브러리는 데이터를 excel, csv 등 여러 방식으로 저장하는 서비스를 제공하기에 판다스를 사용하기로 하였고 데이터를 저장 중 몇가지 문제점을 해결하고 그에 대해 적어보고자 합니다. dataframe or series? 추출한 데이터를 간단하게 파일로 저장하고자 데이터프레임 사용까지 필요없었습니다. series를 사용한 간단한 방법으로 데이터를 csv로 저장하였습니다. 코드 imp.. 2022. 11. 8. 맥북(파이썬 스크래핑을 위한) 크롬드라이버 설정하는 법 셀레니움을 사용한 자동 포스팅을 사용하려면 브라우저 드라이버를 설치하고 경로를 지정해줘야 합니다. 각 브라우저마다 제공하는 드라이버가 있는데 저는 크롬드라이버를 사용하니 한번 설명해보고자 합니다. 드라이버 다운로드 크롬 드라이버는 여기서 다운로드 받습니다. 다운로드 전 본인의 크롬 브라우저 버전을 확인합니다. 설정(점3개) > 도움말 > 크롬 정보란에서 본인이 사용하는 크롬 드라이버를 아래와 같이 확인할 수 있습니다. 항상 최신버전 업데이트로 설정 중인데 현재 업데이트가 되었나 봅니다. 해당 버전의 크롬드라이버 버전은 없어 현재 스크래핑을 못하고 있네요. 무중단 작업을 원한다면 최신 업데이트 설정을 끄는 것도 하나의 방법입니다. 버전을 확인했다면 해당 버전의 크롬 드라이버를 다운받습니다. 크롬 드라이버 .. 2022. 9. 8. 워드프레스 이메일 등록하는 방법 이메일 등록이 어렵다. 워드프레스로 홈페이지를 오픈하고 나서 이메일이 등록되어야 플러그인을 업데이트 했는지.. 누가 댓글을 달았는지... 실시간으로 알려준다. 허나 처음이라면 이메일 등록이 쉽지 않다. AWS smtp 사용 우선 내가 AWS를 사용하기 때문에 방법은 이것밖에 시도해보지 않았다. aws 이외에 구글이나 기타 메일서비스를 하는 곳은 많다. 입맛대로 진행하시되 저는 AWS SES에 대해 내가 진행한걸 정리해보겠다. 워드프레스 이메일 등록 화면 보통 이 화면에서 새로운 이메일을 등록하면 관리자 이메일이 변경 대기중이라는 멘트와 함께 해당 메일로 메일이 와야 하는데 백년을 기다려도 오지 않을 것이다. 왜냐면 smtp가 설정되어 있지 않기 때문이다. 그럼 smtp를 설정해보도록 하겠다. 아마존 SE.. 2022. 8. 30. 이전 1 2 3 4 ··· 14 다음 반응형
