MongoDB Atlas Data Lake 집중 분석 [MongoDB]MongoDBMongoDB Atlas Data Lake는 MongoDB Atlas가 제공하는 새로운 서비스입니다.
많은 고객들이 S3, GCP, Azure Blobs와 같은 저렴한 오브젝트 스토리지에 장기 보관용 데이터를 저장합니다.
하지만 그 중 다수는 의사 결정을 위한 분석이 필요 시 , 효과적으로 해당 데이터를 활용할 수 있는 강력한 시스템이나 도구가 없습니다. MongoDB Atlas Data Lake는 장기간 저장된 고객의 데이터 분석을 가능하게 하며, 해당 비즈니스에 의미있고, 가치있는 정보를 제공할 수 있습니다.
해당 세션에서는 MongoDB Atlas Data Lake에서 사용할 수 있는 기능과 그 구현 방법에 대해 자세히 설명합니다.
MSA를 넘어 Function의 로의 진화::주경호 수석::AWS Summit Seoul 2018Amazon Web Services KoreaThe document discusses the evolution from monolithic architectures to microservices and functions. It covers the journey to microservices, including breaking up monolithic systems, data storage considerations, and challenges. It then discusses how functions can be used to further decompose microservices for improved scalability, flexibility and cost optimization. The presentation argues that adopting these approaches can help organizations gradually transform their systems and keep up with changing demands.
Architecture des Systèmes LogicielsGhazouani MahdiArchitecture des Systèmes Logiciels &
solutions d'entreprise
튜토리얼과 하우투 문서의 차이점은?Jay Park튜토리얼과 하우투 문서을 비롯해 개발 과정에서 읽고 쓰는 문서에 대한 특성(학습 중심 - 이해 중심 - 문제 중심 - 정보 중심 관점을 소개합니다.
학습을 위해 유튜브에 설명 동영상도 올려놓았습니다.
https://youtu.be/HHlBLV281r0
[에이스카운터 웹로그분석]에이스카운터 ASP 서비스 소개서엔에이치엔디엔티(NHN D&T) 에이스카운터는 100% 자체 기술력을 바탕으로 e비즈니스에 최적화된 강력한 분석능력과 확장성, 기술력을 보유하고 있으며, 웹사이트와 모바일 웹사이트, 모바일 어플리케이션을 모두 분석할 수 있는 서비스를 제공합니다.
AWS 신규 데이터 분석 서비스 - QuickSight, Kinesis Firehose 등 (양승도) :: re:Invent re:Cap ...Amazon Web Services Korea2015년 11월 26일(목) 오전 11:00-12:00
동영상 보기: http://bit.ly/awskr-2015-reinvent-recap-webinar-data-analytics
Moika - сервис для бронирование мест в автомойках (сайт, мобильное приложение)Aibek DunaevMoika - carwash booking service
Quelques points sur les métaheuristiquesBENSMAINE AbderrahmaneQuelques points qui intéresseront ceux désirant implémenter une metaheuristique, avec un passage rapide sur Le recuit simulé
PostgreSQL High-Availability and Geographic Locality using consulSean ChittendenVirtual IPs or floating IPs have long been the workhorse mechanism for providing high-availability for database systems, however floating IP addresses have several limitations that make it problematic in modern data centers and cloud environments, notably that it requires all members be in the same Layer-2 domain. consul is a strongly consistent way of providing high-availability services in Layer-3 environments and provides fail-over across different geographic regions. In this talk we will discuss the benefits, setup, and use of consul for fail-over of PostgreSQL, both in a local data center scenario and a geographic redundancy scenario where databases are split across multiple data centers.
[2019] 하이퍼파라미터 튜닝으로 모델 성능 개선하기NHN FORWARD※다운로드하시면 더 선명한 자료를 보실 수 있습니다.
단순하고 반복적인 파라미터 튜닝 작업을 자동화할 방법을 설명합니다.
딥러닝에 대한 깊은 지식이 없어도 모델 성능을 개선할 수 있습니다.
목차
1. 하이퍼파라미터 튜닝이란
2. 베이지안 최적화(Bayesian Optimization)
3. 최적화 시스템 구조
대상
머신러닝/딥러닝에 관심 있는 분 누구나
■관련 동영상: https://youtu.be/PTxqPfG_lXY
AWS를 통한 빅데이터 활용 고객 분석 및 캠페인 시스템 구축 사례 - 임혁용 매니저, AWS / 윤성준 차장, 현대백화점 :: AWS S...Amazon Web Services KoreaAWS를 통한 빅데이터 활용 고객 분석 및 캠페인 시스템 구축 사례
임혁용 매니저, AWS
윤성준 차장, 현대백화점
모든 유통 고객의 소비 니즈에 대한 이해와 그 분석 결과를 바탕으로 한 효과적인 마케팅 캠패인은 언제나 뜨거운 관심사 입니다. 그러나 많은 고객 분들께서는 분석을 통해 얻고자 하는 결과와 그 분석에 필요한 데이터의 수집 및 저장에 있어 아주 오랜 전부터 사용해 오신 Tool을 활용하고 계시면서, 지금 보다 더 나은 방식과 결과를 원하고 계십니다. 또한 고객 분석 결과를 바탕으로 선별된 고객을 대상으로 최적의 상황, 컨텐츠, 채널을 통해 효과적인 타깃 마케팅이 가능한 Tool을 찾고 계십니다. 이에, Redshift, Pinpoint 등 AWS가 제공하는 고객 분석 및 캠패인 툴에 대해서 소개 드리고, 이를 활용하여 비용 효과적인 방식으로 서비스 혁신을 이루신 고객의 사례를 소개드리고자 합니다.
정보시스템 하드웨어 규모산정 지침sam Cyberspace출처 : 한국정보통신기술협회
표준번호 : TTAK.KO-10.0292/R1(2017-06-28)
이 표준은 하드웨어 규모산정의 개념 및 규모산정의 대상이 되는 하드웨어 구성요소를 설명하고 규모산정을 위한 서버별(OLTP 서버, WEB/WAS 서버) 성능 기준을 제시하며, 규모산정 시 일반적인 고려 사항과 규모산정의 절차를 기술한다. 또한 CPU, 메모리, 디스크, 스토리지 등 하드웨어 구성요소별 규모 산정식과 세부 기준값을 제시한다.
Comment integrer les applications de votre Systeme Information entre elles ?Stéphane TraumatCette présentation détaille les solutions et les méthodes existantes pour améliorer votre système d'information en intégrant l'ensemble des applications que vous utilisez.
Les trois grands type d'intégration seront abordés :
• Intégration par les données: données stockées et données mobiles: XML et applications aux services.
• Intégration par la présentation: portails et agrégation de contenus.
• Intégration par les processus: modèles de processus, architectures de services (SOA).
(French) Le scoring au marketing à Orange France - by Claude Riwan - PAPIs Co...PAPIs.io(French) Le scoring au marketing à Orange France
by Claude Riwan
Amazon SageMaker 모델 배포 방법 소개::김대근, AI/ML 스페셜리스트 솔루션즈 아키텍트, AWS::AWS AIML 스페셜 웨비나Amazon Web Services KoreaAmazon SageMaker 배포에 처음 입문 하고자 하는 분들을 위해 동작 방식을 설명하고 실행할 수 있는 가이드를 제공합니다. Amazon SageMaker 빌트인 4가지 서빙 패턴(리얼타임 추론, 배치 추론, 비동기 추론, 서버리스 추론)을 시작으로 프로덕션 적용을 위한 핵심 기능과 비용 절감을 위한 방법을 소개합니다.
실전 서버 부하테스트 노하우 YoungSu SonBestcon 2019에 발표한 웹서버 성능 테스트 실전 노하우 자료입니다.
테스트 케이스 생성부터, 테스트 전략, 데이터 해석 (APM, 인프라 모니터링), 클라우드에서 주의할 사항등 도움이 될만한 내용들만 간추려 전달합니다.
부하 테스트시 어니컴을 불러주세요
AWS 비용 효율화를 고려한 Reserved Instance + Savings Plan 옵션 - 박윤 어카운트 매니저 :: AWS Game...Amazon Web Services KoreaAWS는 지속적으로 자체 비용을 낮추는 것 외에, 고객이 직접 비용을 최적화할 수 있는 다양한 옵션들을 제공하고 있습니다. 이 중 Savings Plans와 Reserved Instances에 대해 알아봅니다. Savings Plans는 AWS에서 2019년에 새롭게 출시한 새로운 Pricing 옵션으로써, Serverless, Container 등 빠르게 변화하는 시장의 컴퓨터 요구 사항에 대응할 수 있도록 Reserved Instances보다 훨씬 더 유연한 과금 모델을 제공합니다. 본 세션을 통해 Savings Plan과 Reserved Instances의 개요와 이들의 차이점을 파악하실 수 있습니다.
AWS-Certified-Cloud-Practitioner wiz.pdfManiBharathi833999AWS Step Functions is a serverless orchestration service that converts an application's workflow into a series of steps by combining AWS Lambda functions and other AWS services. It helps to execute each step in an order defined by the business logic of the application and provides features like sequencing, error handling, and removing operational overhead. Amazon EventBridge is a serverless event bus service that connects applications with data from multiple sources. It helps to build event-driven architectures and delivers real-time data streams from sources to different targets without writing custom code.
Algorithme Colonie de fourmiskamar MEDDAHColonie de fourmis
Ants colony
20141223 머하웃(mahout) 협업필터링_추천시스템구현Tae Young Lee머하웃(mahout) 협업필터링_추천시스템구현
Introduction au traitement d'imagesAbdelouahed AbdouCe cours est une introduction au traitements informatique des images. Le traitement d'images consiste à changer la nature d'une image, afin de:
1.Améliorer de l’information contenue pour aider à l'interprétation par l'homme,
2.La rendre plus adaptée pour une perception autonome de la machine.
[Confluent] 실시간 하이브리드, 멀티 클라우드 데이터 아키텍처로 빠르게 혀...confluentPresenter:
HyunSoo Kim
Senior Solutions Engineer
Korea SE Team Lead
AWS 신규 데이터 분석 서비스 - QuickSight, Kinesis Firehose 등 (양승도) :: re:Invent re:Cap ...Amazon Web Services Korea2015년 11월 26일(목) 오전 11:00-12:00
동영상 보기: http://bit.ly/awskr-2015-reinvent-recap-webinar-data-analytics
Moika - сервис для бронирование мест в автомойках (сайт, мобильное приложение)Aibek DunaevMoika - carwash booking service
Quelques points sur les métaheuristiquesBENSMAINE AbderrahmaneQuelques points qui intéresseront ceux désirant implémenter une metaheuristique, avec un passage rapide sur Le recuit simulé
PostgreSQL High-Availability and Geographic Locality using consulSean ChittendenVirtual IPs or floating IPs have long been the workhorse mechanism for providing high-availability for database systems, however floating IP addresses have several limitations that make it problematic in modern data centers and cloud environments, notably that it requires all members be in the same Layer-2 domain. consul is a strongly consistent way of providing high-availability services in Layer-3 environments and provides fail-over across different geographic regions. In this talk we will discuss the benefits, setup, and use of consul for fail-over of PostgreSQL, both in a local data center scenario and a geographic redundancy scenario where databases are split across multiple data centers.
[2019] 하이퍼파라미터 튜닝으로 모델 성능 개선하기NHN FORWARD※다운로드하시면 더 선명한 자료를 보실 수 있습니다.
단순하고 반복적인 파라미터 튜닝 작업을 자동화할 방법을 설명합니다.
딥러닝에 대한 깊은 지식이 없어도 모델 성능을 개선할 수 있습니다.
목차
1. 하이퍼파라미터 튜닝이란
2. 베이지안 최적화(Bayesian Optimization)
3. 최적화 시스템 구조
대상
머신러닝/딥러닝에 관심 있는 분 누구나
■관련 동영상: https://youtu.be/PTxqPfG_lXY
AWS를 통한 빅데이터 활용 고객 분석 및 캠페인 시스템 구축 사례 - 임혁용 매니저, AWS / 윤성준 차장, 현대백화점 :: AWS S...Amazon Web Services KoreaAWS를 통한 빅데이터 활용 고객 분석 및 캠페인 시스템 구축 사례
임혁용 매니저, AWS
윤성준 차장, 현대백화점
모든 유통 고객의 소비 니즈에 대한 이해와 그 분석 결과를 바탕으로 한 효과적인 마케팅 캠패인은 언제나 뜨거운 관심사 입니다. 그러나 많은 고객 분들께서는 분석을 통해 얻고자 하는 결과와 그 분석에 필요한 데이터의 수집 및 저장에 있어 아주 오랜 전부터 사용해 오신 Tool을 활용하고 계시면서, 지금 보다 더 나은 방식과 결과를 원하고 계십니다. 또한 고객 분석 결과를 바탕으로 선별된 고객을 대상으로 최적의 상황, 컨텐츠, 채널을 통해 효과적인 타깃 마케팅이 가능한 Tool을 찾고 계십니다. 이에, Redshift, Pinpoint 등 AWS가 제공하는 고객 분석 및 캠패인 툴에 대해서 소개 드리고, 이를 활용하여 비용 효과적인 방식으로 서비스 혁신을 이루신 고객의 사례를 소개드리고자 합니다.
정보시스템 하드웨어 규모산정 지침sam Cyberspace출처 : 한국정보통신기술협회
표준번호 : TTAK.KO-10.0292/R1(2017-06-28)
이 표준은 하드웨어 규모산정의 개념 및 규모산정의 대상이 되는 하드웨어 구성요소를 설명하고 규모산정을 위한 서버별(OLTP 서버, WEB/WAS 서버) 성능 기준을 제시하며, 규모산정 시 일반적인 고려 사항과 규모산정의 절차를 기술한다. 또한 CPU, 메모리, 디스크, 스토리지 등 하드웨어 구성요소별 규모 산정식과 세부 기준값을 제시한다.
Comment integrer les applications de votre Systeme Information entre elles ?Stéphane TraumatCette présentation détaille les solutions et les méthodes existantes pour améliorer votre système d'information en intégrant l'ensemble des applications que vous utilisez.
Les trois grands type d'intégration seront abordés :
• Intégration par les données: données stockées et données mobiles: XML et applications aux services.
• Intégration par la présentation: portails et agrégation de contenus.
• Intégration par les processus: modèles de processus, architectures de services (SOA).
(French) Le scoring au marketing à Orange France - by Claude Riwan - PAPIs Co...PAPIs.io(French) Le scoring au marketing à Orange France
by Claude Riwan
Amazon SageMaker 모델 배포 방법 소개::김대근, AI/ML 스페셜리스트 솔루션즈 아키텍트, AWS::AWS AIML 스페셜 웨비나Amazon Web Services KoreaAmazon SageMaker 배포에 처음 입문 하고자 하는 분들을 위해 동작 방식을 설명하고 실행할 수 있는 가이드를 제공합니다. Amazon SageMaker 빌트인 4가지 서빙 패턴(리얼타임 추론, 배치 추론, 비동기 추론, 서버리스 추론)을 시작으로 프로덕션 적용을 위한 핵심 기능과 비용 절감을 위한 방법을 소개합니다.
실전 서버 부하테스트 노하우 YoungSu SonBestcon 2019에 발표한 웹서버 성능 테스트 실전 노하우 자료입니다.
테스트 케이스 생성부터, 테스트 전략, 데이터 해석 (APM, 인프라 모니터링), 클라우드에서 주의할 사항등 도움이 될만한 내용들만 간추려 전달합니다.
부하 테스트시 어니컴을 불러주세요
AWS 비용 효율화를 고려한 Reserved Instance + Savings Plan 옵션 - 박윤 어카운트 매니저 :: AWS Game...Amazon Web Services KoreaAWS는 지속적으로 자체 비용을 낮추는 것 외에, 고객이 직접 비용을 최적화할 수 있는 다양한 옵션들을 제공하고 있습니다. 이 중 Savings Plans와 Reserved Instances에 대해 알아봅니다. Savings Plans는 AWS에서 2019년에 새롭게 출시한 새로운 Pricing 옵션으로써, Serverless, Container 등 빠르게 변화하는 시장의 컴퓨터 요구 사항에 대응할 수 있도록 Reserved Instances보다 훨씬 더 유연한 과금 모델을 제공합니다. 본 세션을 통해 Savings Plan과 Reserved Instances의 개요와 이들의 차이점을 파악하실 수 있습니다.
AWS-Certified-Cloud-Practitioner wiz.pdfManiBharathi833999AWS Step Functions is a serverless orchestration service that converts an application's workflow into a series of steps by combining AWS Lambda functions and other AWS services. It helps to execute each step in an order defined by the business logic of the application and provides features like sequencing, error handling, and removing operational overhead. Amazon EventBridge is a serverless event bus service that connects applications with data from multiple sources. It helps to build event-driven architectures and delivers real-time data streams from sources to different targets without writing custom code.
Algorithme Colonie de fourmiskamar MEDDAHColonie de fourmis
Ants colony
20141223 머하웃(mahout) 협업필터링_추천시스템구현Tae Young Lee머하웃(mahout) 협업필터링_추천시스템구현
Introduction au traitement d'imagesAbdelouahed AbdouCe cours est une introduction au traitements informatique des images. Le traitement d'images consiste à changer la nature d'une image, afin de:
1.Améliorer de l’information contenue pour aider à l'interprétation par l'homme,
2.La rendre plus adaptée pour une perception autonome de la machine.
[Confluent] 실시간 하이브리드, 멀티 클라우드 데이터 아키텍처로 빠르게 혀...confluentPresenter:
HyunSoo Kim
Senior Solutions Engineer
Korea SE Team Lead
리눅스 문제 해결사인 Htop 항목 소개하기Jay Park리눅스/맥에서 시스템(CPU/메모리)과 운영체제/프로세스 상황을 보여주는 top을 대신할 상호대화식 유틸리티인 Htop에 대한 항목을 소개합니다.
학습을 위해 유튜브에 설명 동영상도 올려놓았습니다. https://youtu.be/V6tOpvX-N2I
박진호 - 우분투 부팅 과정에 대한 이야기 (2012Y07M28D)Ubuntu Korea Communityhttp://www.ubuntu-kr.org/viewtopic.php?f=2&t=22403
진행순서
- 행사 소개 및 인사
- 첫번째 이야기 : 커맨드라인 유틸리티 소개와 eBuntu와 함께하는 임베디드 개발 이야기 - drake_kr님
- 두번째 이야기 : Proxmox, 가상머신에 대한 추억 - Readytoact님
- 세번째 이야기 : 우분투 부팅 과정에 대한 이야기 - 박진호님
- 네번째 이야기 : 여성 개발자로 살아온 인생 - 전수현님
- 다섯번째 이야기 : 웹 접근성에 대한 이야기 - 조채연님
노태상 - 리눅스 커널 개요 및 이슈 아이엠 (2010Y01M30D)Ubuntu Korea CommunityWatch video on Youtube! : http://www.youtube.com/watch?v=aZDKyNtSqOo
장소 : 서울시 용산구 원효로 3가 53-5 청진 빌딩 10층 1004호 TERA TEC 사무실
시간 : 2010년 1월 30일 토요일 오후 2:00
발표 : 김성윤님, 강분도님, 노태상님 - 리눅스 커널 - 개요 및 이슈,
세미나 정보 : http://www.ubuntu.or.kr/viewtopic.php...
Place : TERA TEC Office, 1004, 10th floor, Cheongjin Bldg., Wonhyoro 3-ga, Yongsan-gu, Seoul, Korea
Time : 14:00, Saturday, 2010Y 1M 30D
Presentation : Kim Seongyun, Kang Bundo, Noh Taesang - Linux Kernel - Outline and issue
Seminar Info : http://www.ubuntu.or.kr/viewtopic.php...
About Ubuntu
Ubuntu is an ancient African word meaning 'humanity to others'.
It also means 'I am what I am because of who we all are'.
The Ubuntu operating system brings the spirit of Ubuntu to the world of computers.
http://www.ubuntu.com
About Ubuntu Korea Community
We want to be happy using Ubuntu.
'Korean Ubuntu User Forum' Welcomes your voluntary supports.
http://www.ubuntu-kr.org
[오픈소스컨설팅]systemd on RHEL7Ji-Woong ChoiRHEL7에 적용된 systemd의 소개, 특장점, 부팅 프로세스, 유닛 파일의 구조, systemd에 대한 주요 명령어를 소개하는 장표입니다.
본 장표를 활용하여 RHEL7, CentOS7에 대한 내용을 이해하시는 데 도움이 되었으면 합니다.
6. Load Average
What about Multi-processors? My
load says 3.00, but things are
running fine!
1.00 on a single-core system
2.00, on a dual-core
4.00 on a quad-core, etc.
7. CPU부하가 높은 경우
- 사용자 프로그램의 처리가 병목인지
- 시스템 프로그램이 원인인지 확인(top,sar)
- ps로 프로세스 ,cpu사용시간으로 체크
- 상세하게 조사할 때는 strace
CPU 바운드한 프로그램
8. I/O부하가 높은 경우
- 프로그램으로부터 입출력이 많아서
- 스왑이 빈번하게 발생했을 때
- sar, vmstat로 확인
- 메모리 증설(캐시영역)
- 데이터 분산, 캐시서버 도입
I/O 바운드한 프로그램
14. CPU사용률이 계산되는 원리
- Load Average와 마찬가지, 타이머 인터럽트
이용
- 커널은 프로세스 전환을 위해 각 프로세스가
생성된 후 부터 어느정도 CPU시간을 이용
했는지 프로세스 별로 기록(process accounting)
- CPU사용률이나 I/O대기율은 종류별, CPU별
로 계산된 결과
15. SAR(System Activity Reporter)
- CPU사용률, I/O대기율 확인을 위한툴
<설치방법>
1. sudo apt-get install sysstat
2. vi /etc/default/sysstat
ENABLED='false'를 'true'로 설정
3. sudo service sysstat restart
4. sar실행