사용하기 간단한 Memory Pool 클래스

프로젝트 진행 중에, 다중 스레드에서 사용할 Memory Pool 클래스를 인터넷을 통해 검색해보다가 마땅히 사용만하다 판단되는 것이 없어 직접 만들어 사용하고 있는 클래스입니다. 물론 기존에 공개된 Memory Pool 클래스의 기능이 좋지 않다는 것이 아니라, 제 기준, 수준에 너무 사용하기가 어렵고 복잡하다는 생각에서입니다. 물론 그 기능과 성능은 뛰어나겠지만 말입니다. 이에.. 사용하기 쉽고, 매우 간단하게 적용할 수 있는 메모리풀 클래스를 공개해 봅니다.

먼저 사용 방법은 아래와 같습니다. 전역변수로 CMemoryPool을 생성해 놔야 합니다. 싱글리톤 패턴을 적용해야할테지만.. .일단 적용하지 않았습니다. 다른 분께서 적용해 보시고 공개해주시면 매우 영광이겠습니다.

#include "MemoryPool.h"

CMemoryPool MP(10, 1024*1024);

생성자 중 첫번째 인자는 메모리풀에 생성할 메모리 덩어리의 개수이고 두번째 인자는 메모리 덩어리의 크기입니다. 즉, 여러개의 스레드에서 동시에 10개의 메모리 덩어리를 얻어 사용할 수 있으며, 한 덩어리의 크기가 1메가라는 의미입니다.

메모리 덩어리를 얻어 사용하는 방법은 다음과 같습니다.

CMemoryPool::MEMORY_DESC *pMD = MP.Take();

BYTE *pBuffer = pMD->pBuffer; 

// .
// .
// use memory ..
// .
// .

MP.Release(pMD);

다 사용했으면 최종적으로 Release를 호출해줘서 메모리 풀에 반환해줘야 함을 잊어서는 않됩니다. 아무쪼록…. 저처럼 쉽게 사용할만한 메모리풀 소스 코드를 찾지 못하신 분들에게 도움이 되시길 바랍니다.

VS2005, VS2008에서 VC++을 이용해 ISAPI 개발하기

VS2005에서 새로운 프로젝트 창에 ISAPI 프로젝트 항목이 제외되었습니다. 게다가 VS2008에는 그나마 있던 VC++로 개발가능한 WebService 프로젝트 항목도 빠져버렸습니다. 그렇다고 해서 완전이 빠진것은 아니고 새로운 프로젝트 창에서만 제외되었고, 기존의 프로젝트를 열어서 VS2005와 VS2008에서 작업이 가능합니다. 그렇다면 새로운 프로젝트로 ISAPI 개발을 VS2005 이상에서는 시작할 수 있을까요? ISAPI를 이용한 웹컴포넌트 개발이 비록 시대에 역행하는 행위이기는 하지만 어찌되었든 MS 플렛폼인 IIS 서버 웹기반의 서비스 기술로써 가장 퍼포먼스가 뛰어나므로, 아직 폐기 시키기에는 다소 아깝지 않나 하는 생각이 듭니다.

사실 처음에는 ISAPI를 쓰지 않고 대세인 XML 기반인 웹서비스를 사용하려고 하였습니다. 그 배경은 0.2 메가 정도되는 바이너리 데이터를 웹을 통해 주고 받아야합니다. 문제는 0.2메가 크기의 바이너리 데이터를 웹서비스가 사용하는 XML로 인코딩시킬 경우의 문제점입니다.

  • 원본 크기가 최대 4배까지 커진다.
  • 인코딩과 디코딩하는데 걸리는 시간이 매우 길다.

자세한 내용은 이 블로그의 웹서비스와 퍼포먼스(http://www.gisdeveloper.co.kr/entry/웹서비스와-퍼포먼스)를 참고해보시길 바랍니다. 이런 문제점으로 인해 ISAPI를 이용한 서버기술로 회귀하게 되었는데…. 문제는 Visual Studio 2005와 2008에서는 이 프로젝트가 눈에 보이지 않는다는 것입니다. 다행인것은 아예 제거된것이 아닙니다. 그래서 이 글에서는 간단하게나마 ISAPI를 Visual Studio 2005, 2008에서 개발하는 방법을 간단하게 정리한 글입니다. 여기서는 Visual Studio 2005에서 ISAPI Extension 개발에 대한 내용입니다.

1. 새로운 프로젝트 생성하기

정확히 말해 ISAPI는 일반적인 DLL일 뿐입니다. 여기서 몇가지 함수를 외부로 Export 시켜 IIS가 이 함수를 호출함으로써 서로 통신을 하게됩니다. 그 몇가지 함수가 무엇인지는 아래에 설명하겠습니다.

2. 프로젝트 위저드 설정하기
앞서 설명한 것처럼 응용프로그램 종류는 DLL로 지정하며 일단 빈 프로젝트로 생성합니다.

3. 모듈파일 추가하기
외부로 Export할 함수를 지정하기 위한 파일인 모듈파일을 추가합니다.

4. 모듈 파일이 Export할 함수명 지정하기

LIBRARY	"ChartService"

EXPORTS
	HttpExtensionProc
	GetExtensionVersion
	TerminateExtension

앞서 추가한 모듈파일인 module.def에 3개의 함수를 Export 하는데, 위처럼 HttpExtensionProc, GetExtensionVersion, TerminateExtension 입니다. 각 함수의 역활은 아래서 간단하게 살펴보겠습니다.

5. Export할 함수를 구현할 파일 추가하기
앞에서 언급한, 외부로 Export 할 함수를 구현할 cpp 파일 추가합니다.

6. Export할 함수 구현하기

#include 
#include 
#include 

BOOL WINAPI TerminateExtension(DWORD dwFlags)
{
	// 실제 구현
	return TRUE;
}

BOOL WINAPI GetExtensionVersion(HSE_VERSION_INFO *pVer)
{
	// 실제 구현
	return TRUE;
}

DWORD WINAPI HttpExtensionProc(EXTENSION_CONTROL_BLOCK *pecb)
{
	// 실제 구현
	return HSE_STATUS_SUCCESS;
}

이미 이 글을 읽어볼 요량이셨다면, .. 아마도 .. ISAPI은 한번쯤 개발해보셨다고 생각이되는데요.. 여기서는 일단 이 함수들의 주요목적에 대해서만 간단하게 설명드리겠습니다.

TerminateExtension은 서비스가 IIS로부터 Unload될때 실행되는 함수이고, GetExtensionVersion은 서비스가 IIS로부터 처음 Load될때 실행되는 함수입니다. 그리고 HttpExtensionProc는 궁극적으로 클라이언트가 해당 서비스를 요청할때마다 실행되는 함수입니다. 이 상태에서 컴파일을 하면 하나의 dll이 만들어집니다. 실제로 이를 자신의 관리하고 있는 PC의 IIS에 배포을 해야하는데, 그 과정은 아래와 같습니다.

7. IIS에 배포하기
컴파일되어 생성된 dll을 IIS의 폴더에 복사하기전에 기존의 서비스를 Unload 시켜(복사 전 언로드를 예로 지정)야하고, 복사할 폴더의 이름을 지정하고(가상 디렉터리 이름을 지정) 빌드에서 제외를 ‘아니오’로 지정하면 됩니다.

ATL 웹서비스에서 바이너리 데이터 전송에서의 메모리 해제

읽어보시고, 답변 아시는분.. 꼭 댓글 부탁드립니다~ ^^

위의 제목을 영어로 한다면….. 음.. The Release of Memory allocated for the Translating Binary Data in the ATL WebService.. 맞나?? ㅎㅎ 틀렸겠지요~ 무척 짧은 영어다보니…

이번주 월요일부터 오늘까지로 해서 ATL에서 웹서비스를 제작하는데 몇가지 문제점을 파악중입니다. 몇가지 문제점 중에 한가지 풀리지 않은 의문이 있는데요. 바로 웹서비스에서 바이너리 데이터를 클라이언트로 전송할때 서버측의 웹서비스에서 바이너리 데이터를 메모리에 할당하는데….. 이렇게 할당을 했으면 메모리에서 해제를 해야함은 당연합니다. 그런데, MSDN에서 제공하는 예제에서는 할당만 있을뿐 해제는 없더군요. 아래는 서버측(서비스부)에서 바이너리 데이터를 전송해주는 Test 함수의 모습입니다.

HRESULT CServiceXGE::HelloDump(ATLSOAP_BLOB *bstrOutput)
{
    bstrOutput->size = 1024*1024;
    bstrOutput->data = 
        (unsigned char *)malloc(bstrOutput->size);
    
    static bool bFlag = true;
    if(bFlag)
        strcpy((char *)bstrOutput->data, "This is HelloDump");
    else
        strcpy((char *)bstrOutput->data, "tHIS IS hELLOdUMP");
    
    bFlag = !bFlag;
    
    return HTTP_SUCCESS;
}

그리고 아래는 서비스를 호출하는 클라이언트에 대한 코드입니다.

    cs_.PerformanceTest();

    ServiceXGE::CServiceXGE *pSvcXGE = new ServiceXGE::CServiceXGE();

    ATLSOAP_BLOB blobDta;
    HRESULT hRet = pSvcXGE->HelloDump(&blobDta);

    char szBuf[20];
    sprintf(szBuf, "size: %ld =>;", blobDta.size);

    cs_.Write(szBuf);
    cs_.Writeln((const char *)(blobDta.data));

    free(blobDta.data);

    delete pSvcXGE;

    cs_.PerformanceTest(FALSE);

클라이언트에서는 free가 있습니다!! 하지만… 서비스의 프로세스와 클라이언트의 프로세스가 별개일뿐만 아니라 서비스와 클라이언트가 동일한 PC일리도 없습니다. 즉, 서비스의 메모리 할당에 대한 해제가 아니라는 것이지요.

다시 돌아가서, malloc를 통해 클라이언트에게 전송할 데이터를 메모리에 할당을 했습니다. 그럼 적절한 시점에서 클라이언트로 메모리에 할당된 데이터가 쓩~~ 날라가겠지요. 이제 다 날라갔다면.. malloc의 짝꿍인 free 함수를 사용해서 해제를 해야는게 상식일겁니다. 하지만 MSDN의 예제나 구글에서 검색을 해봐도 할당만 했을뿐 해제를 하는 경우가 없습니다. 그럼 해제는 웹서비스가 알아서 해주나보다… 하면 될것을, 저는 아무래도 찜찜해서 이것저것 더 찾아보았습니다. 그러나… 결론은 역시 웹서비스가 알아서 해주나보다…로 결론이 날듯합니다. 역시 여전이 찝찝합니다. 사실 곰곰이 생각해보면 클라이언트로 전송해주기 위해 메모리를 할당하고 클라이언트로 전송이 끝나면 이제 할당받은 메모리를 해제해주는 흐름에 대한 개념은 절대 틀리지 않다고 봅니다. 그런데… 문제는 해제를 해줄 시점에 대한 코드부를 찾을 수 없다는 점입니다. 위의 코드에서 return HTTP_SUCCESS; 바로 직전에 free 함수를 호출하면 아직 클라이언트로 전송하지 않은 시점이기 때문에 에러가 발생하구요.. 그래서, 역시 데이터를 클라이언트로 전송할 시점이 내부적으로 깊이 숨겨져 있어, 그 시점에 접근할 수 없으므로 개발자가 메모리 할당은 했지만 해제는 자동으로 하는 것으로 생각이 굳혀졌습니다.

그래서 이번엔 서비스 측의 코드를 수정해 다른 테스트를 해보았습니다.

char buf[1024*1024];

HRESULT CServiceXGE::HelloDump(ATLSOAP_BLOB *bstrOutput)
{
   bstrOutput->size = 1024*1024;
   bstrOutput->data = buf;

   static bool bFlag = true;
   if(bFlag)
      strcpy((char *)bstrOutput->data, "This is HelloDump");
   else
      strcpy((char *)bstrOutput->data, "tHIS IS hELLOdUMP");

   bFlag = !bFlag;

   return HTTP_SUCCESS;
}

즉, 동적 할당이 아닌 정적 할당입니다. 실행해보면 잘… 됩니다. 물론 클라이언트 코드는 그대로입니다.사실 에러가 나주길 바랬습니다. 내부적으로 메모리 할당을 자동으로 해준다면 정적 메모리 주소에 대한 메모리 해제는 에러가 나야 하기 때문입니다. 그러나… 잘 됩니다. 그렇다면 내부적으로 메모리 해제를 자동으로 해주지 않는다는 말인데?? 라는 생각이 듭니다. 하지만 혹시 내부적으로 메모리가 스택에 있는지, 힙에 있는지를 파악해서 스택이면 메모리 해제를 하지 않고 힙일 경우에만 하는것이 아닌가라는 생각이 듭니다.

않되겠다 싶어서, 물 막고 품는 방식으로 확인을 해보았습니다. 방법은 클라이언트에서 수백번 서비스를 요청을 작업관리자의 메모리 사용량으로 확인을 해보았습니다. 물론 서비스는 동적 메모리 방식으로 말이지요. 수백번 요청이면 한 요청당 1MB 씩 할당하므로 수백MB의 메모리 릭이 발생할 것으로 판단했습니다. 결론은 메모리릭이 없다… 입니다. 그럼 역시 내부적으로 자동으로 메모리를 해제해주는구나.. 라는 판단이 옳은것같습니다. 하지만 역시 왠지 찝찝합니다. 그래서 좀더 검색을 해보던중 CodeProject에 좋은 예를 하나 발견했는데, 그 코드를 살펴보니 ATL에 메모리 관리자가 있다는 것을 알았습니다. 그 메모리 관리자를 사용해 코드를 다시 작성하면 아래와 같습니다.

HRESULT CServiceXGE::HelloDump(ATLSOAP_BLOB *bstrOutput)
{
    IAtlMemMgr *pMem = GetMemMgr();

    bstrOutput->size = 1024*1024;
    bstrOutput->data = 
             (unsigned char *)pMem->Allocate(bstrOutput->size);

    static bool bFlag = true;
    if(bFlag)
        strcpy((char *)bstrOutput->data, "This is HelloDump");
    else
        strcpy((char *)bstrOutput->data, "tHIS IS hELLOdUMP");

    bFlag = !bFlag;

    return HTTP_SUCCESS;
}

즉, 메모리 관리자를 얻어와서 이 메모리 관리자를 통해 필요한 만큼의 메모리 덩어리를 할당받습니다. 그리고 할당받은 메모리를 해제하는 역시 없습니다. 아마도 이 메모리 할당자가 알아서 메모리를 해제해주는 특별한 행동을 한다고 생각해도 좋을듯 싶습니다. 이제 위의 서비스에 대한 클라이언트 부분에 대한 코드입니다.

  cs_.PerformanceTest();

  ServiceXGE::CServiceXGE *pSvcXGE = new ServiceXGE::CServiceXGE();

  ATLSOAP_BLOB blobDta;
  HRESULT hRet = pSvcXGE->HelloDump(&blobDta);

  char szBuf[20];
  sprintf(szBuf, "size: %ld =>", blobDta.size);

  cs_.Write(szBuf);
  cs_.Writeln((const char *)(blobDta.data));

  IAtlMemMgr *pMem = pSvcXGE->GetMemMgr();
  pMem->Free(blobDta.data);

  delete pSvcXGE;

  cs_.PerformanceTest(FALSE);

수정된 것은 일단 서비스의 프록시를 통해 서비스의 메모리 관리자를 얻어와서 이 메모리 관리자를 통해 메모리를 해제합니다. 뭔가 딱딱 들어 맞는듯합니다. 위의 메모리 관리자의 메모리 해제하는 함수(Free)는 내부적으로 클라이언트의 메모리를 해제하는 것은 분명하고… 아마도, 또 다른 임무인, 자신의 서비스 프록시를 통해 서비스에게 데이터 전송이 끝났으니 아까 메모리 덩어리를 해제해도 좋다는 메세지를 날리는 것이 아닐까? 라는 짐작을 해봅니다. 하지만 이것은 어디까지나 짐작이고… 사실 솔찍히 말한다면, 이건 아닐거라고 봅니다. 하지만 제가 살펴본 ATL로 만든 웹서비스를 통해 바이너리 데이터를 전송하는 코드 중에서는 가장 세련되어 보입니다. 일단 문제 생기면 그때 다시 파악해 보렵니다.

명확하게 이것은 이렇게 저렇게 된다! 라고 명시된 책의 문구가 있으면 좋겠는데… ATL을 이용한 웹서비스의 개발은 대세가 아닌지라.. 그런 문구를 찾지 못해 이런 추측으로 마무리를 하네요. ^^; 참고로 Visual Studio 2008에서는 ATL을 이용해 웹서비스를 개발하는 프로젝트가 제거된듯합니다. 암만 찾아봐도 2008의 새로운 프로젝트에서는 나오질 않네요. 웹서비스를 만들기 위해서는 .NET을 이용하라.. 인가 봅니다.

반환타입이 다르게 가상함수 재정의할 수 있는가?

코딩중 궁금하여 Test 해본 코드이다. 순수가상함수가 있다고 할때 이를 속상받는 클래스에서 순수가상함수를 재정의할때 반환타입을 다르게 할 수 있는가라는 스스로의 질문에 대한 정리이다.

기본적으로 Base가 되는 클래스 둘이 있는데 아래와 같다.

class ReturnType {
protected:
	int x;
public:
	ReturnType(int x) {
		this->x = x;
	}

	virtual int GetValue() {
		return x;
	}
};

class Base {
public:
	virtual ReturnType* Get(int a, int b) = 0;
};

클래스 Base는 Get이라는 순수가상함수를 가지고 있고 반환값으로 ReturnType을 갖는다. 여기서 따져보고 싶은 것은 Base의 Get이라는 순수가상함수의 반환 Type을 다르게 하여 선언할 수 있냐는 것이다. 대답은 “않된다”이지만 반환 Type도 OO의 다형성을 활용해서 다르게 선언할 수 있다는 것이다. 아래를 보자.

class ReturnType2 : public ReturnType {
public:
	ReturnType2(int x) : ReturnType(x) {
	}

	virtual int GetValue() {
		return x*x;
	}
};

class Derive1 : public Base {
public:
	virtual ReturnType2* Get(int a, int b) {
		ReturnType2* pRT = new ReturnType2(a+b);
		return pRT;
	}
};

class Derive2 : public Base {
public:
	virtual ReturnType* Get(int a, int b) {
		ReturnType* pRT = new ReturnType(a*2+b*2);
		return pRT;
	}
};

ReturnType으로부터 상속받은 ReturnType2 클래스가 있으며 Base로부터 상속받은 Derive1과 Derive2가 있다. 분명한것은 GetValue라는 순수가상함수의 반환타입이 상속받은 Base와 다르다는 점이다. 하지만 완전이 다른것은 아니고 반환타입이 상속관계를 갖는다. 이런 상속관계가 반환타입을 다르게 할 수 있는 이유가 되는 것이다.