2012~Lee sang sup`s Note

디렉토리내 전체 파일을 얻어낸 뒤(압축까지 해제) 스트링을 검색하여 파일에 저장 

하드코딩된 스트링을 찾기위해서 막 만든거임.

https://github.com/smokedice/PyDBusTree/blob/master/DBusTree.py

https://georgemuraruc.wordpress.com/2015/07/16/d-bus-tutorial-for-python/

웹세션 유지한채로 통신하기

python iterator 관련 tiertools 패키지 및 메소드 정리 

python string 관련 메소드 정리

키보드 마우스 후킹 ( Key Mouse Event hooking ) 

pyHook 이 너무 라이브러리가 잘되어 있다. 

MouseEvent , Keyboard Hook 외에도 아래 사이트를 참조하면 라이브러리들에 대한 소개가 있음.

http://www.cs.unc.edu/Research/assist/doc/pyhook/public/pyHook.HookManager-module.html

• .(점)은 어떤 문자이건 하나의 문자를 가리킨다. (new line 제외)
• \w 는 대소문자와 밑줄을 포함하는 모든 영숫자 [a-zA-Z0-9_]를 가리킨다.
• \s 는 space, tab 등 white space 를 가리킨다. (\S 는 non-whitespace)
• + 는 1개 또는 그 이상을 가리킨다.
• * 는 0 개 또는 그 이상을 가리킨다.
• ? 는 0 개 또는 1 개를 가리킨다.
• \ 는 특수문자를 표현하는 용도로 사용되지만, 특수문자앞에서는 특수문자의 사용을 제외하고 문자자체를 나타내도록 한다.
• 
  

>>> import re                                              # re 모듈 import

>>> match = re.search('iig', 'called piig');     # search 를 이용하여 iig 문자열 검색

>>> match.group()                                      # search 결과 match object 의 group 함수 이용

'iig'

>>> type(match)                                         # search 의 return 형이 match object 임

<type '_sre.SRE_Match'>

>>> match

<_sre.SRE_Match object at 0x2b26d13dcbf8>

>>> match = re.search('igs', 'called piig');    # 없는 문자열 검색

>>> match.group()

Traceback (most recent call last):

  File "<stdin>", line 1, in <module>

AttributeError: 'NoneType' object has no attribute 'group'

>>> type(match)                                         # 검색 후 return 형을 확인해보니 NoneType

<type 'NoneType'>                                      # 이는 검색 결과가 없다는 것임.

>>> match = re.search('..g', 'called piig');     # . 은 하나의 문자를 가리킴. 즉 앞에 아무문자나

>>> match.group()                                      # 두문자가 온 후 그 다음 문자가  g 인 것을 검색

'iig'

>>> match = re.search('i..g', 'called piig');    # i 와 g 사이에 문자 두개가 있는 것을 검색

>>> match.group()                                      # 결과가 없는 것임. NoneType

Traceback (most recent call last):

  File "<stdin>", line 1, in <module>

AttributeError: 'NoneType' object has no attribute 'group'

>>> match = re.search('p..g', 'called piig');           # p 와 g 사이 문자 두개

>>> match.group()

'piig'

>>> match = re.search('a.c', 'a.c called piig');      # a 와 c 사이에 한문자가 있는 문자열 검색

>>> match.group()

'a.c'

>>> match = re.search('a\.c', 'a.c called piig');   # a 와 c 사이 .(점) 문자가 있는 문자열 검색

>>> match.group()

'a.c'

>>> match = re.search('a.c', 'abc called piig');     # a 와 c 사이에 한문자가 있는 문자열 검색

>>> match.group()

'abc'

>>> match = re.search('a\.c', 'abc called piig');   # a.c 라는 문자열 검색 (\. 은 . 문자)

>>> match.group()

Traceback (most recent call last):

  File "<stdin>", line 1, in <module>

AttributeError: 'NoneType' object has no attribute 'group'

>>> match = re.search(':\w\w', 'abc called :piig');  # : 문자 뒤에 두개의 아무문자나

>>> match.group()

':pi'

>>> match = re.search(':[\w]+', 'abc called :piig');  # : 문자뒤에 아무문자나 1 개 이상 붙은것

>>> match.group()

':piig'

>>> match = re.search('(\d\d\d)-(\w\w\w)', '123-abc');  # 2 개의 pattern group 검색

>>> match.groups()                               # 결과로 리턴된 group 을 tuple 로 묶어서 보여줌.

('123', 'abc')

>>> match.group()                                 # 결과 리턴된 각 group 의 string 을 연결해서 보여줌

'123-abc'

>>> match.group(0)                                # 0 번째 group 은 없고 match.group() 과 같은 결과

'123-abc'

>>> match.group(1)                                # 첫번째 group (element)을 string 으로 리턴

'123'

>>> match.group(2)                                # 두번째 group (element)을 string 으로 리턴

'abc'

>>> match = re.search('(ab)','ab');          # 하나의 pattern group 만으로 검색

>>> match.groups()                                # tuple 의 element 는 하나임

('ab',)

>>> match.group(1)

'ab'

>>> match.group(2)

Traceback (most recent call last):

  File "<stdin>", line 1, in <module>

IndexError: no such group

>>> match = re.search('(aaa).(bbb)@(cc.)', '  aaa.bbb@ccx');  # 3 개의 group 검색

>>> match.groups()

('aaa', 'bbb', 'ccx')

>>> m = re.search('([\w.]+)@([\w.]+)', 'blah dp.lee.dp.lee@gmail.com yyxdf @ aa@xx')

>>> m.groups()

('dp.lee.dp.lee', 'gmail.com')

>>> m.group(1)

'dp.lee.dp.lee'

>>> m.group(2)

'gmail.com'

>>> import re

>>> bool(re.match('[0-9]', '    77'))                     # 첫 문자가 안맞으면 false

False

>>> bool(re.search('[0-9]', '    77'))                   # 문자열 전체 검색이므로 있으면 true

True

>>> m = re.findall('([\w.]+)@([\w.]+)', 'blah dp.leedp.lee@gmail.com yyxdf @ aa.xx@xx.net')

>>> m.groups()                                                 # 결과는 match object 가 아니기 때문에

Traceback (most recent call last):                        # groups 나 group 같은 함수가 없음.

  File "<stdin>", line 1, in <module>

AttributeError: 'list' object has no attribute 'groups'

>>> m.group()

Traceback (most recent call last):

  File "<stdin>", line 1, in <module>

AttributeError: 'list' object has no attribute 'group'

>>> m

[('dp.leedp.lee', 'gmail.com'), ('aa.xx', 'xx.net')]  # 결과는 각 pattern group 결과(tuple)가

                                                                         # List 로 묶여진 것임.

                                                                         # 이후 m 은 List 연산들을 자유롭게 수행.

>>> m = re.search('AA', '  aa bb cc')                    # default option 으로 사용하면

>>> m.group()                                                     # 대소문자 구분해서 아무것도 못찾음

Traceback (most recent call last):

  File "<stdin>", line 1, in <module>

AttributeError: 'NoneType' object has no attribute 'group'

>>> m = re.search('AA', '  aa bb cc', re.I)            # re.I 옵션을 사용하니 대소문자 미구분

>>> m.group()                                                    # case-insensitive 라고 하죠.

'aa'

window7 으로 바뀌면서 여러가지 파일 및 명령어에 많은 권한이 생겼다.

이런 경우 일반 유저권한으로 파일을 만들었을때 제대로 동작하지 않는 것들이 많게 되는데,

py2exe 를 사용하고 있다면 컴파일 당시 권리자 권한을 요구 할 수 있다.

다음구조를 옵션으로 추가해 주면된다.

setup ( 
    windows = [
        {
            "script" : "Chameleon.py",
            "uac_info" : "requireAdministrator",
        }
    ]
)

출처 : http://pydjango.tistory.com/30

python Win32모듈 다운로드 후 아래 코드 작성

다운로드

아래 코드 작성 저장후 서비스 등록은 python filename.py install, 서비스 시작은 python filename.py start

### Run Python scripts as a service example (ryrobes.com)
### Usage : python aservice.py install (or / then start, stop, remove)

import win32service
import win32serviceutil
import win32api
import win32con
import win32event
import win32evtlogutil
import os, sys, string, time

class aservice(win32serviceutil.ServiceFramework):
    _svc_name_ = "Service short Name"
    _svc_display_name_ = "Service Display Name"
    _svc_description_ = "Service description

    def __init__(self, args):
        win32serviceutil.ServiceFramework.__init__(self, args)
        self.hWaitStop = win32event.CreateEvent(None, 0, 0, None)

    def SvcStop(self):
        self.ReportServiceStatus(win32service.SERVICE_STOP_PENDING)
        win32event.SetEvent(self.hWaitStop)

    def SvcDoRun(self):
        import servicemanager
        servicemanager.LogMsg(servicemanager.EVENTLOG_INFORMATION_TYPE,servicemanager.PYS_SERVICE_STARTED,(self._svc_name_, ''))

       self.timeout = 640000    #640 seconds / 10 minutes (value is in milliseconds)
       #self.timeout = 120000     #120 seconds / 2 minutes
       # This is how long the service will wait to run / refresh itself (see script below)

       while 1:
          # Wait for service stop signal, if I timeout, loop again
          rc = win32event.WaitForSingleObject(self.hWaitStop, self.timeout)
          # Check to see if self.hWaitStop happened
          if rc == win32event.WAIT_OBJECT_0:
            # Stop signal encountered
            servicemanager.LogInfoMsg("SomeShortNameVersion - STOPPED!")  #For Event Log
            break
          else:
            t=time.localtime()
            if t.tm_min==0 or t.tm_min==30:
                #Ok, here's the real money shot right here.
                #[actual service code between rests]
                try:
                    file_path = "C:\PYTHON\filename.py"
                    execfile(file_path)             #Execute the script
                except:
                    pass
                #[actual service code between rests]
            else:
                pass

def ctrlHandler(ctrlType):
    return True

if __name__ == '__main__':
   win32api.SetConsoleCtrlHandler(ctrlHandler, True)
   win32serviceutil.HandleCommandLine(aservice)

키워드 py2exe 로 변환시 인코딩 에러 encoding error 

py2exe로 작성했다 exe를 일본어나 한글을 포함한 폴더로 실행하면 아래와 같은 에러가 나온다. 

UnicodeDecodeError: 'ascii' codec can't decode byte 0x83 in position 34: ordinal not in range(128)

UnicodeDecodeError: 'utf8' codec can't decode byte 0x83 in position 34: ordinal not in range(128)

다른 블로그를 보면 

sys.setdefaultencoding 을 사용하여 변환을 해주라고 하지만 이 역시도 적용이 잘 되지 않았는데, 

이유인즉 site.py 라는 곳에서 먼저 setdefaultencoding 을 사용하기 때문이다.

이를 해결하기 위해 많은 문서에서 site.py 를 수정해주는 등의 문제 해결 방법을 적어놨는데

필자는 잘 되지 않았고 삽질 끝에 아래와 같이 해결 하였다.

[Main.py]

[setup.py] : py2exe 에 사용됨

 간단히 설명하자면 setup.py 에서 include 라는 옵션을 넣어 encodings 에 관한 것을 

사용하지 않겠다고 해주고, sys를 import 하여 setdefaultencoidng 을 선언해 주는것이다.

이방법을 사용하면 이클립스 상에서는 에러가 뜬다. 

하지만 py2exe 로 바이너리로 만들면 한글 문제가 잘 해결되며 오류가 없이 잘 실행되는

것을 확인할 수 있다.

ㅇㅇㄴ해 많은 서 site.py 를 수정해주는 등의 문제 해결 방법을 적어놨는데
필자는 잘 되지 않았고 삽질 끝에 아래와 같이 해결 하였다. 

[python 2.7] 엑셀 다루기 xlwt xlrd 사용하여 엑셀 (xls, xlsx cvs) 컨트롤 하기

회사 업무중에 엑셀 작업을 받고, 그 엑셀의 데이터를 웹사이트에 입력하여 응답 값을 다시 엑셀에 저장 할 일이 생겼다.

딱 떠오르는 것은 역시 파이썬! 파이썬 답게 이미 패키지가 다 존재하였다.

xlwt (xls wrtie 의 약자) xlrd (xls read 의 약자) 사용법을 명확하게 정리해 놓은 곳이 없어서 한번 정리해 보았다.

분산 처리를 위한 Paraller Python (이하 PP) 설치법 및 사용법

[ PP 다운로드 사이트 http://www.parallelpython.com/content/view/18/32/ ]

설치를 하고나면 pp 패키지를 자유롭게 import 하여 사용 할 수 있다.

다수의 컴퓨터를 분산처리 하는 구조는 아래와 같다.

PPServer는 이미 Parallel Python 사이트에서 만들어놓은 프로그램을 사용하여 테스트 하였다.

각 Slave 컴퓨터에서는 ppserver를 동작 시킨다. 그리고 MASTER 서버는 자신이 연산할 함수를 각 서버에 분산시킨 뒤 그 결과값을 리턴 받는 식이다.

[ Client A ]

 # ppserver.py

[ Client B ]

 # ppserver.py

[ Client C ]

 # ppserver.py

[ Client D ]

 # ppserver.py

[ Master ]

# [병렬 처리할 프로그램].py

[ 결과 화면 비교  1. 클러스터가 없을때 ]

[ 결과 화면 비교 2. 클러스터가 local 1개 remote 1개 총 2대일떄 ]

멤버십에서 한 PPT가 올라왔는데, python 으로 분산처리를 하는 과정의 PPT였다.

지금까지 다수의 연산처리는 Multi Thread 방식을 사용해서 처리 하였었는데, 이 PPT 에 의하면 오히려 multi-Thread 방식은 속도가 더 느려진다 (Global Interpretor Locking 때문) 

http://docs.python.org/2/library/multiprocessing.html#module-multiprocessing

하여금 Multi-Processing 방식을 추천해주는데 코드는 아래와 같음. 

(사용법이 thread 사용법과 거의 동일함)

(python 2.6 이상부터는 default 모듈임)

Thread 와 비교하면 어떨까?

python exploit 코드들에서 자주 나오는 lambda 사용법으로 인한 pack 에 대한 이해 

thanks for 충호~

keyword  : 문자열 조합 brute forcing 

부르투 포싱을 할때 쓸 문자열 조합 방법이다.

keyword  : zip 패스워드 풀기 zip 암호 풀기 zip 파일 암호 깨기 zip 파일 크랙 패스워드 크랙 python 

치명적인 파이썬 책에 있는 내용인데, 정말 재밌는 책인 것 같다. 

이런저런 유용한(?) 코드들이 많은 느낌이다.

아래 내용은 zip 파일 패스워드를 딕셔너리 방식으로 크랙하는 내용이다. 쓰레드를 이용하여 처리 하도록 되어 있고,

좋은 dictionary 나 브루투 포스 알고리즘만 짜두면 나쁘지 않을 것 같다.

usage %prog -f <zipfile> -d <dictionary>

root@ubuntu:/home/k1rha/python/ZIP_CRACK# 

import zipfile

import optparse

from threading import Thread

def extractFile(zFile,password):

try :

zFile.extractall(pwd=password)

print '[+] Found password ' + password + '\n'

except :

pass

def main():

parser = optparse.OptionParser("usage %prog "+\

"-f <zipfile> -d <dictionary>")

parser.add_option('-f',dest='zname', type='string',\

help='secify zip file')

parser.add_option('-d' , dest='dname', type='string',\

help='specify dictionary file')

(options,args) = parser.parse_args()

if(options.zname == None) | (options.dname == None):

print parser.usage

exit(0)

else :

zname = options.zname

dname = options.dname

zFile=zipfile.ZipFile(zname)

passFile = open(dname)

for line in passFile.readlines():

password = line.strip('\n')

t = Thread(target = extractFile , args=(zFile,password))

t.start()

if __name__ == '__main__':

main()

[python 2.7] telnetlib를 이용한 telnet 접속하기

http://docs.python.org/2/library/telnetlib.html

#!/usr/bin/env python
import getpass
import sys
import telnetlib

HOST = "localhost"
user = raw_input("Enter your remote account: ")
password = getpass.getpass()

tn = telnetlib.Telnet(HOST)

tn.read_until("login: ")
tn.write(user + "\n")
if password:
    tn.read_until("Password: ")
    tn.write(password + "\n")

tn.write("ls\n")
tn.write("exit\n")

print tn.read_all()

import httplib, urllib

params = urllib.urlencode({'id':'k1rha','pw':'k1rha','pwch':'k1rha','age':'11','sex':'1','email':'1111'})

headers = {"Content-type":"application/x-www-form-urlencoded"}

conn=httplib.HTTPConnection("223.194.105.120:80")

conn.request("POST","/web7/web300_edit_ok.php",params,headers)

response = conn.getresponse()

#print response.status, response.reason 200 OK

data = response.read()

print data

conn.close()

from distutils.core import setup

import py2exe

import glob

setup(

    #console = ['test.py'],                         

    windows = [{'script':'client.py', 'icon_resources':[(1,'project.ico')]}],                         

    options = { 'py2exe': { 'compressed':1         

                            ,'optimize':2           

                            ,'dist_dir':'./dist'    

                            ,'bundle_files':1      

                            }},

    zipfile = None,                                 

    data_files = [('img', glob.glob('img/*.bmp'))] 

)

지난 글에 이어서 리버스 커넥션 파일에 업로드 다운로드 기능을 추가해 보았다.

조금은 억지로 막만든 경향이 있어 코드가 깔끔치는 않지만 파이썬을 시작한지 얼마 안된 나로썬 결과가 뿌듯하다.

백신에 안잡힌다는 매력있는 파이썬 악성코드 인듯..

같은서버에 테스트 하기위해 파일을 다운로드 받거나 업로드 받으면 

같은 파일명이 아닌 _[파일명] 으로 저장되게 해 놓았다.

Server 

Client

#!/usr/bin/python
# -*- coding: cp949 -*-

import os


s = os.path.split("/My Jukebox/Cool Jazz.mp3")

# 디렉토리명 구하기
print s[0]  # /My Jukebox

# 패스에서 파일명만 구하기
print s[1]  # Cool Jazz.mp3

# 확장자만 구하기
s = os.path.splitext("/My Jukebox/Cool Jazz.mp3")
print s[1]  # .mp3




# 이번에는, 드라이브명까지 포함된 Windows 전용 패스를 취급
s = os.path.splitdrive("D:/My Jukebox/Cool Jazz.mp3")

# 드라이브 이름 (MS윈도우의 경우)
print s[0]  # D:

# 드라이브명이 제거된 패스 구하기
print s[1]  # /My Jukebox/Cool Jazz.mp3

파이썬 코딩중 재밌는것은 파이썬코드를 그대로 exe 파일로 변환 시킬수 있는 프로그램(?) 이 있다는 것이다.

하나는 freeze 라는 것이고 (혹은 cx_freeze)  또하나는 py2exe 이다 .

한데 재밌는 사실은 이렇게 만들어진 프로그램은 알아서 패킹이 된다는 점이다.

그리고 system call 을 호출시 백신에서 탐지되던 부분도 없어 지는 듯하다.

즉 python 으로 리버스커넥션을 짜면 system call 류중 하나로 아쥬 아쥬 심플하게 리버스 커넥션을 구현 할 수 있다.

[Client ]

Server

아래는 결과 화면이다.

from array import *

from subprocess import *

from socket import *

import os

SEND_MSG =""

PROCCESS_PATH ="checkList.conf"

PROCLIST_FILE = open(PROCCESS_PATH,'r')

PATH_LIST = PROCLIST_FILE.readlines()

flag = 0

i=0;

while len(PATH_LIST)>i :

# print(PATH_LIST[i])

pipe = os.popen(PATH_LIST[i])

RESULT_VALUE = pipe.readlines()

j=0

if(len(RESULT_VALUE[j])<1) : 

SEND_MSG = PATH_LIST[i]+"can`t resume !! "

break

while len(RESULT_VALUE) > j :

SEND_MSG =SEND_MSG+RESULT_VALUE[j]

j=j+1

i=i+1

pipe.close()

print(SEND_MSG)

root@ubuntu:~/k1rha/python/http# python blind.py

Traceback (most recent call last):

  File "blind.py", line 1, in <module>

    import urllib.request

  File "/usr/lib/python3.2/urllib/request.py", line 88, in <module>

    import http.client

  File "/usr/lib/python3.2/http/client.py", line 69, in <module>

    import email.parser

  File "/usr/lib/python3.2/email/parser.py", line 12, in <module>

    from email.feedparser import FeedParser

  File "/usr/lib/python3.2/email/feedparser.py", line 27, in <module>

    from email import message

  File "/usr/lib/python3.2/email/message.py", line 17, in <module>

    from email import utils

  File "/usr/lib/python3.2/email/utils.py", line 28, in <module>

    import socket

  File "/root/k1rha/python/http/socket.py", line 7, in <module>

    s = socket.socket(socket.AF_INET,socket.SOCK_STREAM)

AttributeError: 'module' object has no attribute 'AF_INET'

root@ubuntu:~/k1rha/python/http# 

위와같인 에러가 떴을때 아래와 같은 결과를 얻을수 있었다. 

h I found the problem, it seems I cant run socket things from my home folder ... I moved the script into a new folder and it worked.

Thanks.

즉 폴더에 소켓생성권한이 없기떄문에 다른 폴더로 옮겨 실행했다는 내용이다 필자도 비슷하게 해결봄.

thread를 이용할 경우 혹은 간혹 전역변수가 필요할 때가 있다.

쓰레드를 돌리고 싶은경우 2.7 - > 3.2로 넘어가는 순간 import 되는 것이 thread 에서 _thread 로 변경되엇다.

참조 사이트 : http://docs.python.org/py3k/library/_thread.html?highlight=thread#_thread.start_new_thread

[ example ] 

system 함수를 사용하여 명령어를 칠경우, 그 값을 리턴 받고 싶을때가 있다.

Python은 이것을 파이프를 통해 간단하게 가져 올 수가 있다.

위와같은 케이스는 하드드라이브의 용량을 체크하는 구절을 위해 만든 구문이다. 

위와같이 shell 옵션과 stdout 옵션을 통해 가지고 popen 을 하면 파이프를 통해 가져올 수 있다.

UDP server - client를 구현중 python 3.2 에서는 이상한 에러를 자주 뱉어 내게 된다. 

이이유는 sendto가 2.7에서는 string 으로 전송이 가능하였지만 3.2 부터는 바이트로 전송이 되어야 하기 때문이다.

예제코드는 아래와 같다

[ server ]

[ client ] 

사례. 

file 을 리스트의 목록에 따라 여러개를 호출해 주려고 하였었다.

변수명을 미리 선언해주지 않는 python 의 특징이 있지만, 배열의 경우는 미리 선언을 해 주어야한다. 

미리 선언방식은 [None] 를 원하는 배열 크기만큼 곱하여 미리 선언해 주면된다.

위와같이 선언시에 리스트 내용의 갯수만큼 FILE_LOG 리스트가 생겨난다. 

ex1)