아마존 사이트에서 fishing rod 라는 검색어로 상품을 검색했을 때 검색된 상품 리스트의 ASIN 정보를 수집하는 코드이다. # _*_ coding: utf-8 _*_ from bs4 import BeautifulSoup import urllib import html5lib import time def getSearchItemAsin(keywords): headers = {‘User-Agent’: ‘ Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:47.0) Gecko/20100101 Firefox/47.0’} asins = [] sleep_time = 0 sleep_exec = True for …
아마존 API를 이용해 키워드에 해당되는 상품의 ASIN 정보를 수집한다. bottlenone, BeautifulSoup, html5lib 모듈을 이용했다. 해당 모듈은 아래와 같이 설치했다. 파이썬 3.6 버전을 기준으로 한다. $ python3.6 -m pip install beautifulsoup4 $ python3.6 -m pip install html5lib $ python3.6 -m pip install bottlenose 다음으로 아래의 파이썬 코드를 작성한다. # _*_ coding: utf-8 _*_ import bottlenose from …
input 이나 textarea 의 내용을 클립보드로 복사하기 위해 clipboard.js 를 사용한다. 기본 clipboard.js 의 기능에 복사 후 Copied 라는 툴팁이 표시되도록 수정했다. 코드는 아래와 같다. Clipboard 데모 : http://demo.codepub.net/clipboard.html <!DOCTYPE html> <html> <head> <meta charset=”utf-8″> <title>Clipboard Demo</title> <link rel=”stylesheet” href=”./css/clipboard.css”> <script src=”https://ajax.googleapis.com/ajax/libs/jquery/1.12.4/jquery.min.js”></script> <script src=”https://cdnjs.cloudflare.com/ajax/libs/clipboard.js/1.6.0/clipboard.min.js”></script> <script src=”./js/clipboard.tooltip.js”></script> </head> <body> <div> <input type=”text” value=”http://www.google.com” id=”copy_text”> <button class=”copy”>COPY</button> </div> …
파이썬 코드를 작성하고 실행해보기만 하다가 간만에 PHP 코드를 보니까.. 왜 이렇게 낯설게 느껴지는지.. 한 때는 PHP로 개발해서 솔루션을 배포하고 했는데.. 이렇게까지 달라지다니.. 사람이 참 놀라울 따름이다. 기존 영카트5에 포함된 썸네일 엔진의 코드를 수정해서 원본 이미지의 비율을 유지하면서 썸네일 파일을 생성하도록 코드를 수정했다. 간만에 했더니 3시간 가량 걸렸는데.. 마지막에 이미지의 브라우저 캐시 때문에 오류가 있는 줄 …
오늘은 파이썬의 mmap 모듈과 multiprocessing 모듈을 이용해서 텍스트 파일의 데이터를 추출해 재가공하는 부분을 작성해봤다. 대용량 파일의 처리는 mmap 모듈을 사용하는 것이 효율적이라고 해서 적용을 했는데.. 일단 10만건 기준으로 기존보다는 10초정도 빨라진다. 추출 데이터를 좀 더 늘려서 테스트를 진행해봐야 할 것 같다. # _*_ coding: utf-8 _*_ from multiprocessing import Process import mmap import time import …