Deep dive into Kernel

Xen의 VM은 기본적으로 Host Machine의 Physical Core를 dynamic하게 할당 받지만,특정 VM에게 특정 CPU만 사용할 수 있도록 설정 할 수 있음 이를 위한 기술이 CPU Pinning 이라고 함 또한 CPU Pinning을 할 때는 NUMA 아키텍쳐를 고려해야 한다.최근의 Nehalem 이후 CPU는 NUMA 아키텍쳐이기 때문에 Pinning 시 같은 CPU node에 할당 하는 것이 Cache 효과를 높일 수 있다. 자세한 설명은 첨부 :

HPC 클라우드는 클라우드 컴퓨팅 영역에서 High end급 사업자를 대상으로 한 고부가 산업이다. HPC 클라우드를 구축하기 위한 방법에 대한 기술을 연재합니다. 주요 내용1장. HPC 클라우드의 개요 : 2장. HPC 클라우드 구축방법3장. HPC 클라우드 성능비교

오래 간 만(?)에 Cloud Talk을 다시 합니다 ^^;CloudStack에서 Secondary Storage로 사용하고, Primary Storage의 SR로도 가능한 NFS 서버에 대한 이야기 입니다. Soft vs. HardSoft 방식: NFS 서버 장애가 발생할 경우, NFS client는 에러를 발생, NFS서버와 연결을 종료함, Not recommend (NFSv4에서는 soft를 미지원)Hard 방식: NFS 서버 장애가 발생할 경우, client는 hang 상태로 유지, NFS가 복구되면 다시 정상적으로 동작 root_squash vs. no_root_squashNFS서버가 root_squash 설정이 되어 있으면, NFS client는 NFS 서버에 nobody 권한으로 접근함, 주..

Oracle VM Server에서 Templates 디렉토리의 이미지를 VM을 생성하기 위해서 copy하는 과정은 dd를 통해서 함 샘플/bin/dd if /OVS/Repositories/0004fb000003000007f61b5778cee94b/VirtualDisks/88b81577-947d-4064-bc64-ec7c1b4633f7.img of /OVS/Repositories/0004fb000003000007f61b5778cee94b/VirtualDisks/0004fb0000120000b4b1a86c97e4d59b.img bs 1M iflag direct oflag direct conv sparse 주요 옵션 분석 bs=BYTES force ibs=BYTES and obs=BYTESiflag=FLAGS..

HPC 분야의 신흥 강자로 Nvidia의 CUDA가 부상하고 있다.최근 GTC2012에서 Nvidia는 Kepler Architecture를 발표하여, VDI를 위해서 VGX 플랫폼을 시연하였다. - VGX 출시: 2012.3Q- XenServer에서 지원 : 2012.4Q 아마존 Cluster GPU: 서버당 2개의 Nvidia Telsa 카드를 장착 - 이는 서버 당 한개의 VM을 생성할 수 밖에 없음, - Dom0, Domu 각 한개씩 MS의 RemoteFX는 OpenGL 1.1 , DirectX9 만 지원하는 한계가 있음따라서 XenServer에 GPU Paththrough 를 이용하는 것이 GPU 의 모든 Feature를 사용할 수 있음 GPU 서버를 만들 때 고려 사항- 전력: 225와트/1G..

CloudStack에서 VM의 IP 할당 방법 RVM에서 dnsmasq 프로그램을 통해서 제공- RVM 은 DHCP 서버 및 GW로 동작- 설정 파일:/etc/dnsmasq.conf listen-address=172.27.0.1dhcp-range=172.27.0.1,staticdhcp-hostsfile=/etc/dhcphosts.txt 할당한 IP정보 리스트/etc/dhcphosts.txt

XenServer에서 CentOS 설치시 URL http://ftp.daum.net/centos/5/os/x86_64 debian URLhttp://ftp.daum.net/debian/

Hbase Scan example - scan table from "2012-05-09-09-35-192.168.0.0" to "2012-05-09-09-40-192.168.0.0" with row keys.- Filter row key which has string "192.168.210.10" source code package org.hadoop.dna.analyzer;import java.io.IOException; import org.apache.hadoop.conf.*;import org.apache.hadoop.fs.Path;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.client.Get;im..

HBase Get example Source Code package org.hadoop.dna.analyzer; import java.io.IOException; import org.apache.hadoop.conf.*;import org.apache.hadoop.fs.Path;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.client.Get;import org.apache.hadoop.hbase.client.HTable;import org.apache.hadoop.hbase.client.Result;import org.apache.hadoop.hbase.util.Bytes; public class Traf..

1. HPC 정의 1.1 HPC(High Performance Computing) 정의 - 일반적으로 과학 기술 연산에 사용되는 초고속 컴퓨터를 말하며, 수퍼 컴퓨터와 같은 의미로 사용됨 - 네트워크 및 병렬 컴퓨팅 기술의 발달함에 따라 HPC는 수퍼컴퓨터 뿐만 아니라 그리드 컴퓨팅(클러스터 컴퓨팅) 기술을 이용하여 구현하기도 함 - 최근에는 클라우드 컴퓨팅 기술과 접목하여 Amazon과 같은 클라우드 서비스 업체에서 HPC 클라우드 서비스를 제공함 ¡ 주요 활용 영역 - 지구 시뮬레이션, 기상 예측, 분자 모델링, 게놈 분석 등 ¡ GPU Computing목적 - 고성능의 산술연산이 가능한 GPU를 이용하여 CPU의 성능을 향상 시키는 컴퓨팅 1.2 Amazon HPC - Amazon은 Cluster ..