파이썬 코드를 작성하고 실행해보기만 하다가 간만에 PHP 코드를 보니까.. 왜 이렇게 낯설게 느껴지는지.. 한 때는 PHP로 개발해서 솔루션을 배포하고 했는데.. 이렇게까지 달라지다니.. 사람이 참 놀라울 따름이다. 기존 영카트5에 포함된 썸네일 엔진의 코드를 수정해서 원본 이미지의 비율을 유지하면서 썸네일 파일을 생성하도록 코드를 수정했다. 간만에 했더니 3시간 가량 걸렸는데.. 마지막에 이미지의 브라우저 캐시 때문에 오류가 있는 줄 …
오늘은 파이썬의 mmap 모듈과 multiprocessing 모듈을 이용해서 텍스트 파일의 데이터를 추출해 재가공하는 부분을 작성해봤다. 대용량 파일의 처리는 mmap 모듈을 사용하는 것이 효율적이라고 해서 적용을 했는데.. 일단 10만건 기준으로 기존보다는 10초정도 빨라진다. 추출 데이터를 좀 더 늘려서 테스트를 진행해봐야 할 것 같다. # _*_ coding: utf-8 _*_ from multiprocessing import Process import mmap import time import …
어젠 차 수리로 하루를 날려버렸다. 근데 오늘도 컨디션이 썩 좋지만은 않아서 자전거를 타러갈까 고민을 했다. 날씨예보에 오후엔 비예보가 있어서 그 핑계로 가지않으려고도 했지만 주중엔 자전거를 탈 수가 아직은 없기 때문에 좀 무리가 되더라도 나가보자 싶었다. 그렇지 않아도 새로운 일 때문에 스트레스가 쌓였고 차 문제로 또 스트레스를 받았으니 몸을 움직여서 스트레스를 푸는 게 좋을 것 같다고 생각했다. (more…)
이전에 작성했던 코드를 다시 한번 수정했다. 별다른 것은 없고 퍼포먼스 체크를 위해 실행 시간을 출력하는 부분을 상점ID별로 정보를 출력하도록 수정했다. # _*_ coding: utf-8 _*_ from multiprocessing import Process import time import datetime import locale seller = [] exclude = [] datas = [] def get_exce_time(start, end): return datetime.timedelta(seconds=(end – start)) def number_format(num, places=0): “””Format …
아래의 코드는 파이썬을 공부하면서 만들었기 때문에 최적화 등과는 거리가 멀다. 테스트 목적의 코드이기 때문에 정상작동은 보장할 수 없다. 판매자와 상품코드가 탭으로 분리된 큰 용량의 텍스트 파일에서 각 판매자 별로 상품코드를 분리해서 각각 텍스트로 파일로 저장한다. 상품코드 중 exclude_item_id.txt 파일에 저장된 코드는 제외한다. # _*_ coding: utf-8 _*_ from multiprocessing import Process import time import datetime …