Advanced Search
Search Results
81 total results found
AWS HealthOmics 소개 및 주요 링크
홈페이지, 공식 유저 가이드 AWS HealthOmics는 생물정보학자, 연구원, 과학자와 같은 사용자가 유전체학 및 기타 생물학적 데이터를 저장, 쿼리, 분석 및 분석하여 인사이트를 생성할 수 있도록 지원하는 AWS 서비스입니다.연구 및 임상 조직의 게놈 정보 저장 및 분석 프로세스를 단순화하고 가속화하며 과학적 발견과 통찰력 생성을 가속화합니다. HealthOmics에는 세 가지 주요 구성 요소가 있습니다. Healthomics Storage를 사용하면 ...
Hail on EC2 (옵션)
앞에서 배운 것들을 토대로 새로운 EC2를 생성하고 접속한 뒤 오픈소스 프로그램인 Hail 을 설치 및 사용해 봅시다. Python3 버전 확인 python3 --version Python3는 설치되어 있다면 아래와 같이 pip을 설치합니다. curl -O https://bootstrap.pypa.io/get-pip.py python3 get-pip.py --user Hail 툴 의존성 패키지 및 프로그램 설치 sudo yum insta...
AWS Glue
여기서는 Hail을 VCF to Parquet 목적으로 사용하는 법을 설명합니다. 스크린샷이 첨부된 버전은 여기서 확인할 수 있습니다. 사전 준비 hail-all-spark.jar 파일을 다운로드 받습니다. Amazon S3 서비스로 접속해서 앞에서 다운로드 받은 hail-all-spark.jar 파일을 본인에 알맞은 버킷에 업로드합니다. 업로드한 hail-all-spark.jar 파일을 선택하고 Copy S3 URL을 눌러 주...
Research and Engineering Studio on AWS
RES(Research and Engineering Studio on AWS)는 관리자가 안전한 클라우드 기반 연구 및 엔지니어링 환경을 만들고 관리할 수 있는 사용하기 쉬운 오픈 소스 웹 기반 포털입니다. 과학자와 엔지니어는 RES를 사용하여 클라우드 전문 지식 없이도 데이터를 시각화하고 대화형 애플리케이션을 실행할 수 있습니다. https://aws.amazon.com/hpc/res/ https://aws.amazon.com/blogs/hpc/new-re...
Hail with Amazon EMR notebook
노트북 셋업 EMR 스튜디오에서 동일한 VPC에 새 스튜디오를 만듭니다. 생성한 스튜디오에 대한 새 작업 공간(노트북)을 생성하면 완료되면 jupyterHub에 대한 새 탭이 자동으로 열립니다. python3 커널을 사용하여 새 노트북을 시작합니다. EMR 노트북에 Hail 설치 pip install hail 추후 S3a 프로토콜 사용을 위한 내용 (Hadoop-AWS module) Ssh into primary node (a...
AWS HealthOmics로 유전체 분석 (Fastq to VCF, Annotation) 자동화하기
cd aws-healthomics-eventbridge-integration/workflows/vep aws stepfunctions start-execution \ --state-machine-arn arn:aws:states:<aws-region>:<aws-account-id>:stateMachine:omx-container-puller \ --input file//container_image_manifest.json AWS He...
AWS HealthOmics에서 Annotation 작업 수행하기
AWS HealthOmics variant stores and annotation stores are no longer open to new customers. Existing customers can continue to use the service as normal. For more information, see AWS HealthOmics variant store and annotation store availability change. AWS He...
Quickstart Hail (Korean)
스택 준비 AWS CLI credential을 준비하고 터미널에서 적용합니다. export AWS_DEFAULT_REGION="us-east-1" export AWS_ACCESS_KEY_ID="{ACCESS_KEY}" export AWS_SECRET_ACCESS_KEY="{SECRET_ACCESS_KEY}" export AWS_SESSION_TOKEN="{SESSION_TOKEN}" 이 CloudFormation 스택을 시작하려는 reg...
실습용 윈도우 EC2 인스턴스 자동화
이 가이드는 AWS CLI를 사용하여 윈도우 서버 EC2 인스턴스를 여러 개 자동으로 설정하는 과정을 상세히 설명합니다. 실제 환경에서는 사용자의 요구사항에 맞게 설정을 조정해야 하며, 실제 테스트가 반드시 필요합니다. 사전 요구사항 AWS CLI 설치 및 구성 Bash 스크립트에 대한 기본 지식 AWS 계정 및 필요한 권한 전체 워크플로우 초기 EC2 인스턴스 실행 윈도우 인스턴스에 접속하여 필요한 프로그램 설치 커스텀 AMI 생성...
AWS HealthOmics - Storage
오믹스의 스토리지 컴포넌트는 2개가 있습니다. Reference store Sequence stores 이름에서도 알 수 있듯이 레퍼런스 스토어는 1개만 생성이 가능하며, 이 스토어 1개 안에 다수의 레퍼런스를 등록할 수 있습니다. 사람 유전체 지도 외에도 모델 Organism등 FASTA 파일 형식의 데이터는 모두 레퍼런스로 등록하여 관리할 수 있습니다. 가장 놀라운 사실은 Reference 스토어에 관리되는 참조 유전체 데이터의 저장 비용은 무료...
Nf-core 워크플로우 마이그레이션 하기 (scrnaseq)
참고문서: https://catalog.us-east-1.prod.workshops.aws/workshops/76d4a4ff-fe6f-436a-a1c2-f7ce44bc5d17/en-US 이 문서를 참고하여 환경을 준비합니다. 여기서는 이 과정은 생략합니다. 2025년 6월 6일기준 scrnaseq v4.0.0 도 지원합니다. (nextflow의 플러그인인 nf-scheam 지원 참고) 다만 현재 아래 내용은 2.7.1 기준으로 작성되었습니다. 프...
Nf-core 워크플로우 마이그레이션 하기 (rnaseq)
참고 문서: https://catalog.us-east-1.prod.workshops.aws/workshops/76d4a4ff-fe6f-436a-a1c2-f7ce44bc5d17/en-US 이 문서를 참고하여 환경을 준비합니다. 여기서는 이 과정은 생략합니다. 프로젝트 셋업 nf-core repository로부터 워크플로우 복제 cd ~ git clone https://github.com/nf-core/rnaseq --branch 3.14.0 --...
AWS HealthOmics - Troubleshooting
공식문서 https://docs.aws.amazon.com/omics/latest/dev/troubleshooting.html ECR_PERMISSION_ERROR Unable to access image URI: {account_id}.dkr.ecr.us-east-1.amazonaws.com/quay/quay.io/biocontainers/bioconductor-dropletutils:1.18.0--r42hf17093f_1. Ensure ...
Best practices for monitoring Amazon FSx for Lustre clients and file systems
https://aws.amazon.com/blogs/storage/best-practices-for-monitoring-amazon-fsx-for-lustre-clients-and-file-systems/ Agent 설치 sudo yum install amazon-cloudwatch-agent IAM 역할 및 사용자 생성 - AmazonSSMManagedInstanceCore and CloudWatchAgentServerPolicy IAM policie...
Tagging w/ Nextflow
Tagging 소개 태그 (Tag)는 AWS 리소스에 할당하는 레이블입니다. 태그는 키와 값으로 구성되니다. 예를들어 태그를 사용하여 부서, 유형, 애플리케이션 별로 리소스에 레이블을 지정할 수 있습니다. AWS Batch 의 작업 정의의 태깅을 사용해서 aws batch에서 실행되는 작업에 대한 리소스 태그를 지정할 수 있습니다. 아래는 그 내용을 설명합니다. AWS Batch Tagging your AWS Batch resources B...
AWS를 처음 시작하는 대학 고객을 위한 필수 내용
데이터 Amazon S3를 사용할때 멀티파트 업로드 기능을 사용할 수 있습니다. 다만 이때 불완전한 멀티파트 업로드를 삭제하도록 버킷 수명 주기 구성 설정이 필요합니다. https://docs.aws.amazon.com/ko_kr/AmazonS3/latest/userguide/mpu-abort-incomplete-mpu-lifecycle-config.html https://repost.aws/ko/knowledge-center/s3-multipart...
제목 없음
Quickstart Hail (English)
Deploy an EMR cluster on AWS, with Spark, Hail, Zeppelin and Ensembl VEP using CloudFormation service. This tool requires the following programs to be previously installed in your computer: Amazon's Command Line Interface (CLI) utility Git To insta...