Blue Breeze

https://github.com/Anorov/PySocks Proxy 서버 SOCKS 사용 Free Proxy List 나만의 웹 크롤러 만들기(7): 창없는 크롬으로 크롤링하기Selenium Headless Browser Testing: HTMLUnitDriver & PhantomJS 프록시 이용 스크래핑 파이삭스 PySocks pip install pysocks # pip install pysocks import socks import socket from urllib.request import urlopen try: # http://socks-proxy.net/ # set_proxy(proxy_type, addr[, port[, rdns[, username[, password]]]]) socks...

2019/01/23 - [Language/Python] - library Pillow - thumbnail create2019/01/24 - [Language/Python] - library Tesseract - OCR 이미지 처리 후 OCR 결과 얻기 from PIL import Image import subprocess def cleanFile(filePath, newFilePath): image = Image.open(filePath) # 회색 임계점 설정후 저장 image = image.point(lambda x: 0 if x

https://github.com/tesseract-ocr https://github.com/tesseract-ocr/tesseract Install Tesseract via pre-built binary package TESSERACT(1) Manual Page Tesseract at UB Mannheim Windows 테세렉트는 OCR 라이브러로 숫자 제한 없이 폰트를 인식할 수 있도록 훈련이 가능하며, 유니코드문자도 인식할 수 있다. Install # Install sudo apt install tesseract-ocr sudo apt install libtesseract-dev # edit sources.list sudo vi /etc/apt/sources.list Copy the first li..

Pillow (PIL Fork) Create JPEG thumbnails from __future__ import print_function import os, sys from PIL import Image size = (128, 128) for infile in sys.argv[1:]: outfile = os.path.splitext(infile)[0] + ".thumbnail" if infile != outfile: try: im = Image.open(infile) im.thumbnail(size) im.save(outfile, "JPEG") except IOError: print("cannot create thumbnail for", infile)

일반적인 HTTP 인증 프레임워크Basic Authentication import requests from requests.auth import AuthBase from requests.auth import HTTPBasicAuth auth = HTTPBasicAuth('username', 'password') r = requests.post(url='http://domain.com/basicLogin.php', auth=auth) print(r.text) 파이썬으로 웹 크롤러 만들기 한빛미디어 9.5 HTP 기본 접근 인증, 183p

나만의 웹 크롤러 만들기(2): Login with Session 쿠키추적 import requests params = {'username':'username', 'password':'password'} r = requests.post('http://domain.com/login.php', params) # print(r.cookies.get_dict()) r = requests.get('http://domain.com/profile.php', cookies=r.cookies) print(r.text) 세션이용 import requests session = requests.Session() params = {'username':'username', 'password':'password'} s = sess..

APIs and the Python Requests library upload form submit a jpg, png, or git : python requests imort requests files = {'uploadFile': open('../file/something.jpg')} r = requests.post('http://domain.com/upload.php', files=files) print(r.text) 파이썬으로 웹 크롤러 만들기 9.4 파일과 이미지 전송 , 180p

https://sites.google.com/site/partofspeechhelp/http://www.cis.upenn.edu/+treebank/ 펜실베니아 대학의 펜 트리뱅크(Penn Treebank) 프로젝트 NKTK는 텍스트에 태그를 붙일 때 널리 쓰이는, 펜실베니아 대학의 펜 트리뱅크를 기본적으로 사용한다. 태그 원어 한국어 CC coordinating conjunction 등위 접속사(and, or, but 같은 접속사) CD cardinal number 기수(순서의 읨가 없이 수량만 나타내는 수) DT determiner 한정사(명사 앞에 붙는 the, some, my 같은 말들) EX existential "there" 장소가 아니라 존재는 나타내는 there(There is always ..

ModuleNotFoundError: No module named ‘win32api’ 문제 win32api NotFoundError scrapy shell ... File "c:\users\uncao\scoop\apps\python\current\lib\site-packages\twisted\internet\_win32stdio.py", line 9, in import win32api ModuleNotFoundError: No module named 'win32api' pypiwin32 설치 pip install pypiwind32

https://jupyter.org/ Jupyter Notebook 설치하기 주피터(Jupyter, IPython >= 3)의 다중 커널 개념 이해하기 - 파이썬2와 파이썬3 동시에 사용하기 Jupyter notebook 파이썬 코드를 웹 환경에서 작성 및 실행할 수 있도록 제공하는 툴 pip install --upgrade pip # pip upgrade pip install ipython[notebook] # run jupyter notebook