웨비나속 Q&A
최근 웨비나 진행 중 발생한 질문과 답변을 조회할 수 있습니다
[질문] BigQuery는 RDBMS 처럼 일정한 스키마를 가진 테이블을 생성하고, 정형화 된 데이터(structured data)를 저장되니, 데이터 웨어하우스로 보는것이 적합할 것 같은데..... 빅 쿼리에 데이터를 적재할 테이블의 스키마는 어떻게 짜는게 바람직한지 궁금합니다.
일반적인 DB modeling 툴을 사용하는 경우도 있지만, DW/OLAP 성 테이블이기 때문에 데이터를 가능하면 분산보다는 하나의 테이블에 담는 것이 유리합니다. 그래서 DDL이나 api, UI 등을 통해 작성하시면 될 것 같습니다.
정명훈
2023-04-26 14:25
우리가 사용하는 오렌지 같은 ddl 툴을 사용해서도 가능하지 궁금합니다.
윤성원
2023-04-26 14:26
BigQuery driver를 addon 할 수 있는 모든 응용 프로그램에서 사용 가능합니다. EX) DBeaver 등
클라우드메이트
2023-04-26 14:28
ansi sql로 export 해서 apply 하면 가능합니다. 다만, oltp 성 DB와는 다르다 보니 거기서 ERD 처럼 만드는 것은 의미가 크지 않습니다.
정명훈
2023-04-26 14:29
예 그렇군요...export해서 사용하면 가능하겠네요...답변 감사합니다.
윤성원
2023-04-26 14:29
[질문] 한국 및 중국, 홍콩 등의 아시아권 이커머스 및 물류 시스템에 적용할 때 사용할 수 있을 것 같은데 해당 규모에서의 적용사례 있으면 말씀해 주세요. 다른 시스템 과의 비교도 부탁드립니다
해당 내용에 대해서 국내/해외 사례에 대해서는 클라우드메이트 [email protected] 로 문의 주시면 상세한 내용 상담드릴 수 있을 것 같습니다.
클라우드메이트
2023-04-26 14:26
[질문] 빅쿼리에서는 데이터웨어 하우스에서 데이터를 Export하지 않고 모델링이 가능한지 궁금하며, 만약 가능하다면 속도면에서 어느정도 성능향상이 되는지 궁금합니다.
네. 결론부터 말씀드리면 가능합니다. BigQuery 내에서도 ANSI SQL 과 거의 유사한 형태의 모든 DDL 및 DML을 지원합니다. 따라서 BigQuery 내에서 데이터 분석의 주제 영역에 맞게 모델링 할 수 있습니다.
클라우드메이트
2023-04-26 14:22
[질문] BigQuery의 standard SQL 쿼리로 머신러닝 모델을 생성하고 실행할 수 있는지 궁금하며, 예측 테이블을 생성한 후, REST API 처럼 사용할 수도 있는지 궁금합니다.
Google Cloud 내에서는 ML 모델 개발을 할 수 있는 별도의 서비스가 존재합니다. BigQuery 내에서는 ML 모델에 필요한 기초 학습 데이터로서의 빠른 분석이 가능한 형태라고 봐주시면 좋을 것 같습니다.
클라우드메이트
2023-04-26 14:20
BigQuery에서도 BigqueryML로 직접 Standard SQL로 머신 러닝 학습 가능하고... 해당 모델을 ML 모델을 개발할 수 있는 Vertex AI 서비스에 올려 REST API로 서빙 가능합니다. BQ 내에서 SQL 사용한 batch serving도 가능합니다.
정명훈
2023-04-26 14:22
" ／‘’ 빅커리와 최신추세 확장적인 ChatGPT 결합하여 운용은 가능한가요?
안녕하세요, 최종경님 키보드 내의 일반 슬래시를 입력하시면, 자동으로 [질문] 말머리가 입력됩니다.
잇츠맨 IT's MAN
2023-04-26 14:16
감사합니다
최종경
2023-04-26 14:16
Google Cloud 상에서의 GPT-3 또는 GPT-4 에 대한 구축, 튜닝, 운영은 구체적인 요구사항을 기반으로 제안드릴 수 있을 것 같습니다. 클라우드메이트 [email protected] 로 문의주시면 친절하게 상담해드리겠습니다.
클라우드메이트
2023-04-26 14:19
[질문] BigQuery는 쿼리 민첩성을 확보하기 위해 서버리스 데이터 웨어하우스로 데이터 처리 및 분석을 제공하는데 BigQuery의 장점을 살리면서 서버리스가 아닌 온프레미스 및 다양한 클라우드 환경에서는 동일한 결과를 얻기는 어려울까요?
BigQuery 의 장점을 살리기 위해서는 컴퓨팅을 BigQuery BORG 내에서 이루어져야 합니다. 다만, 온프레미스 영역의 다양한 데이터 원본으로부터 BigQuery 으로 ETL 파이프라인을 개발하여 BigQuery에서 데이터 분석을 효과적으로 할 수 있다고 설명드릴 수 있겠습니다.
클라우드메이트
2023-04-26 14:14
[질문] 그림이 잘 이애가 되지 않네요. ETL pipeline을 타면 일단 용도에 따른 field 중심 structured Data가 되는 DW로 구성되고, ELT, 즉 Loading을 일단 하는 방식이 DL(data lake)아니었나요?
기성의 ETL 파이프라인에서 ELT 방법론이 화두가 된 것은 저렴한 컴퓨팅 비용으로 인해 가능해진 측면이 있습니다. BigQuery에서는 ETL 또는 ELT 의 2가지 방법론 모두 구현이 가능하다고 말씀드릴 수 있겠습니다. 개념적으로 로딩만 일단 해놓은 방식은 Data Lake가 맞습니다.
클라우드메이트
2023-04-26 14:16
오늘 발표자료 부탁드립니다. 컨설팅 서비스도 지원하시나요?
아직 답변이 없습니다
time stamp 로그 데이터를 분석해야 하는데, 전처리는 온프레미스 단에서 하나요? 아니면 빅쿼리를 이용해서 하나요?
ETL, 내지는 ELT 모두 가능한 시나리오가 될 수 있습니다. 일단 BigQuery에서도 timestamp 형식의 컬럼을 지원하고 있으니, 모두 가능합니다.
클라우드메이트
2023-04-26 14:08
오늘 발표자료 부탁드립니다. 컨설팅 서비스도 지원하시나요?
박종구
2023-04-26 14:09
발표자료 전달드릴 예정입니다~ 설문조사 항목에서 컨설팅 서비스 신청하시면, 연락 드리도록 하겠습니다 :)
클라우드메이트
2023-04-26 14:12
[질문] CCTV관제센터에 대한 HCI 적용 사례는 있는지요? 국내가 없다면 글로벌하게 해외 구축 사례는 없는지??
아직 답변이 없습니다
[질문] 클라우드 이용할때 보안서비스를 별도로 이용하면 운영자 인건비까지 추가되어서 별도 비용이 증가 하던데요.. 하드웨어로 비용을 절감하면서 보안까지 강력하게 하려면 서비스를 어떻게 받아야 하는건지 알고싶습니다.
해당 질문은 Dell Technologies의 DPS 팀이 답변드릴 수 있을 것 같습니다 담당 영업으로 문의 부탁드립니다!
델 테크놀로지스
2023-04-25 14:45
RP4VM으로 실시간 복제 지원됩니다.
델 테크놀로지스
2023-04-25 14:45
[질문] 다른 VM서버로 자원을 넘겨서 중단없이 보호하면서 로드밸런싱(옮겨가면서 무중단 서비스를 제공하는것) 하는 것이 가능한건가요?
vSAN은 이미 분산 배치되어 있기에 로드밸런싱이 필요 없게 됩니다. Host를 추가하거나 제거할 때에만 로드밸런싱이 발생할 수 있습니다.
델 테크놀로지스
2023-04-25 14:45
[질문] 외부 vcenter를 사용할 경우, 내부 vcenter로 변경을 하려면 재설치를 하는 방법 외 다른 방법이 없을까요? 혹시 쉽게 vcenter를 바꿀 수 있는 기능의 개발 예정이 있을까요?
내부 vCenter의 외부화만 지원되고 있습니다. 일부 VxRail 노드를 Host Remove하시고 VxRail을 초기화하면 새로운 내부 vCeter가 생기게 됩니다. 이후 마이그레이션하면서 VxRail 노드를 새로운 클러스터로 추가하시면 됩니다.
델 테크놀로지스
2023-04-25 14:44
[질문]하이브리드 클라우드는 이식성 및 다양한 환경의 연계등 확장성이 우수하지만 보안성면에서 취약점이 늘어낧수있는데 이에 대한 효과적인 대책 및 솔루션은 어떻게 되는지요?
NSX를 도입하여 세분화 된 보안 설정 및 모니터링 가능합니다.
델 테크놀로지스
2023-04-25 14:46
[질문]빅데이터등 비정형데이터를 고속처리하는데있어서 적합한 기능은 어떤게 있는지와 해킹등을 통한 DB오염,변조를 막기위한 보안기능은 어떤게 있는지요?
아직 답변이 없습니다
[질문] 기업에서 소프트웨어 정의 데이터 센터 기반 HCI 환경을 기업의 상황에 맞게 최적으로 구현할 수 있는 방버에 대해서 질문드립니다
아직 답변이 없습니다
[질문] 일반적인 부분보다 더 가시성을 확보할 수 있는 방법이 있을까요? 개선 또는 장애처리 측면에서 궁금합니다.
아직 답변이 없습니다
[질문]VMware의 HCI 도입시 어떤 효과를 기대할 수 있나요? 그리고 장애 발생이나 운영관리의 애로사항은 없는지, 만약 구축형과 임대형이 있다면 어떤것을 추천하시는지요?
아직 답변이 없습니다
[질문] 회사에서 디지털 업무환경을 개선하는 데 데스크탑 가상화를 효과적으로 할 수 있는 방안에 대해서 문의드립니다
아직 답변이 없습니다