본문 바로가기 대메뉴 바로가기

테크니컬 스토리

아이티마야의 새로운 기술 뉴스를 만나보세요.
기술자료
분산 스토리지 클러스터 선택의 이유 가성비 MLOps 스토리지 분산 스토리지 클러스터 선택의 이유 최근 MLOps 환경에서 가장 중요한 이슈는 단연 GPU와 스토리지입니다. GPU는 가격과 성능에 대한 테이블이 존재하지만, 스토리지는 여러 업체가 많은 이슈를 겪고 있습니다. SAN Storage 기존 전통적인 대용량 스토리지를 사용하자니 IOPS로 인한 전체 MLOps의 학습 속도 저하가 발... 2023.05.03
K8s내에 Ceph Storage Cluster 구성 (Multi Node) 오픈소스 스토리지 클러스터를 K8s내에 구성하기 K8s내에 Ceph Storage Cluster 구성 Kubernetes는 여러 스토리지 선택지가 있지만, 그중 온프레미스 환경에서 관리가 쉽고 강력한 성능을 내는 Ceph이 있습니다. Ceph Storage Cluster는 안정적이며, 높은 성능과 Block, File, Object 스토리지로 다양하게 사용... 2023.02.14
아파치 카프카 (Apache Kafka) 오픈소스 분산형 스트리밍 플랫폼 - Apache Kafka 아파치 카프카 (Apache Kafka) Apache Kafka 란? Apache Kafka는 오픈소스 분산 스트리밍 플랫폼이며 주로 데이터 파이프 라인을 만들 때 사용되는 솔루션입니다. Apache Kafka 용어 설명 1. 브로커 (Broker) : 카프카가 설치되어 있는 서버 혹은 노드 등을 ... 2023.02.13
k8s에서 외부 Ceph Storage Cluster를 기본 StorageClass로 사용하기 다른 용도로 사용 중인 Ceph Storage를 Kubernetes에서도 이어 사용할 수 있습니다. k8s에서 외부 Ceph Storage Cluster를 기본 StorageClass로 사용하기 Kubernetes에서 스토리지 클래스로 사용할 수 있는 스토리지 종류는 다양합니다. Local, AWS EBS, AzureFile, AzureDisk, CephF... 2023.01.27
Kubernetes LoadBalancer 사용 (MetalLB) K8s LoadBalancer 사용을 위한 MetalLB Kubernetes LoadBalancer 사용 (MetalLB) k8s는 대다수의 서비스를 함께 배포하지만, 일부 서비스는 외부 서비스를 사용해야 합니다. 그중 대표적인게 네트워크 서비스 중 하나인 LoadBalancer입니다. k8s에서 제공하는 네트워크 모드는 clusterIP, NodePort... 2023.01.27
WSL을 이용하여 도커 사용 WSL을 이용하여 도커 사용 WSL 활용 방법 WSL(Windows Subsystem for Linux)의 정의 · Windows 환경에서도 리눅스를 사용할 수 있다. 기존에 사용하였던 듀얼 부팅. VM 등 리눅스를 설치해서 사용을 하였는 때 불편한 점들을 개선하여 더 효율적으로 사용이 가능하다.· WSL(Windows subsystem for Linux)... 2023.01.12
의료 데이터 분석/설계를 위한 OHDSI CDM 기반의 의료 데이터 분석/설계 오픈소스 OHDSI Atlas 의료 데이터 분석/설계를 위한 OHDSI OHDSI? CDM? OHDSI는 OMOP CDM 기반의 분산 연구망을 표준 및 관련 소프트웨어 도구를 만들고 유지 관리하는 국제적인 비영리 단체입니다. CDM 기반의 오픈소스를 운영하고 있습니다. OHDSI와 누적된 의료 데이터를 활용하여 여러 분... 2022.12.20
nvidia-smi 어디까지 확인 가능한가요? nvidia-smi로 GPU 서버를 모니터링하는 방법 nvidia-smi 어디까지 확인 가능한가요? GPU 서버에서 GPU를 사용하기 위해서는 필수적으로 Nvidia driver라는 프로그램을 설치해야 합니다. Nvidia driver는 아래의 URL에서 과거 버전별 / GPU 종류별로 다운로드가 가능합니다. 현재 사용하고 계시는 프로그램과의 호환성, GP... 2022.12.20
네트워크 대역폭 테스트 - iperf 오픈소스로 하는 간편한 서버 간 네트워크 대역폭 테스트 네트워크 대역폭 테스트 - iperf iperf란? iperf는 오픈소스로 제공하고 있는 서버-서버 간, 또는 서버-클라이언트 간의 네트워크 대역폭을 테스트할 수 있는 편리한 도구입니다.윈도우, 리눅스, 안드로이드, IOS, MacOS 등 다양한 환경에서 사용할 수 있습니다. 대역폭 테스트 진행 테스트... 2022.12.12
손쉬운 GPU 클러스터 자동 배포화 도구 Nvidia DeepOps 손쉬운 GPU 클러스터 자동 배포화 도구 Nvidia DeepOps 점점 숫자가 늘어나는 GPU 서버 관리 어떻게 하시나요? - 오픈소스 편 DeepOps DeepOps는 Nvidia에서 제공하는 GPU 클러스터 배포 자동화 도구입니다. Ansible을 이용하여 클러스터를 구성하고, Nvidia에서 제공하는 예제를 통해 구동테스트를 할 수 있습니다. Dee... 2022.12.08
PLEASE WAIT WHILE LOADING...