클라우드로 칼퇴하자!

Azure Container Registry

깽필이 — Tue, 17 Sep 2024 18:07:21 +0900

Azure Container Registry(ACR)는 Docker Registry 2.0을 기반으로 한 관리형 서비스로, 컨테이너 이미지와 관련 아티팩트를 저장하고 관리하는 데 사용됩니다. Azure의 다양한 도구 및 서비스와 통합되어 컨테이너 이미지의 빌드, 배포, 관리 과정을 자동화할 수 있습니다.

주요 사용 사례

배포 대상: AKS, Azure Container Apps, App Service 등 다양한 Azure 서비스 및 Kubernetes, Docker Swarm, DC/OS 같은 오케스트레이션 시스템에서 컨테이너 이미지를 끌어오기.
자동화: 소스 코드 커밋 또는 기본 이미지 업데이트를 트리거로 이미지 빌드를 자동화하고, 여러 이미지 빌드 및 테스트 작업을 병렬로 수행 가능.

주요 특징

레지스트리 서비스 계층: Basic, Standard, Premium의 세 가지 계층을 제공하며, 각 계층은 다양한 통합 및 보안 기능을 포함.
보안 및 액세스: HTTPS, TLS 1.2를 통해 전송, Microsoft Entra ID와 RBAC를 통한 인증 및 권한 제어, 방화벽 및 가상 네트워크를 통한 보안 제공.
지원 이미지: Windows 및 Linux 기반 이미지를 포함하며, Docker 명령어로 이미지 관리. Helm 차트 및 OCI 형식의 이미지도 지원.
자동화된 이미지 빌드: ACR 작업을 통해 이미지 빌드, 테스트, 배포의 자동화를 지원하며, 다중 단계 작업을 사용해 클라우드에서 컨테이너 이미지 빌드 및 테스트 가능.

ACR은 고급 보안, 자동화, 복제 기능을 제공해 대규모 컨테이너 이미지 관리에 적합한 플랫폼입니다.

Azure 클라우드에서 네이티브 앱을 배포할 수 있는 방법

깽필이 — Tue, 17 Sep 2024 17:56:11 +0900

Azure에서 클라우드 네이티브 앱을 배포하는 다양한 옵션은 각기 다른 요구 사항에 맞춰 제공됩니다.

주요 플랫폼은 다음과 같습니다:

Azure Container Apps: 서버리스 마이크로서비스 및 작업을 위해 최적화된 컨테이너 기반 플랫폼으로, Kubernetes 스타일의 앱 지원과 이벤트 기반 확장 기능을 제공합니다. Kubernetes API에 대한 직접 액세스는 제공하지 않지만 완전 관리형 환경을 제공합니다.
Azure App Service: 웹 사이트 및 웹 API에 적합한 완전 관리형 호스팅 서비스로, 코드 또는 컨테이너 기반 배포를 지원합니다. 특히 웹 애플리케이션에 최적화되어 있습니다.
Azure Container Instances (ACI): 간단한 단일 컨테이너 인스턴스를 제공하는 주문형 서비스로, 복잡한 오케스트레이션이나 확장이 필요하지 않은 경우 적합합니다.
Azure Kubernetes Service (AKS): Kubernetes API에 직접 액세스할 수 있는 완전 관리형 Kubernetes 서비스로, 모든 Kubernetes 워크로드를 실행하는 데 적합합니다.
Azure Functions: 서버리스 함수 실행을 위한 FaaS(Functions-as-a-Service) 플랫폼으로, 이벤트 기반 애플리케이션 개발에 최적화되어 있습니다.
Azure Spring Apps: Java의 Spring Framework를 사용하는 애플리케이션에 적합한 완전 관리형 서비스입니다.
Azure Red Hat OpenShift: Kubernetes 기반 OpenShift 환경을 제공하며, Red Hat과 Microsoft 간의 협력으로 구축된 완전 관리형 서비스입니다. OpenShift를 이미 사용하는 팀에 적합합니다.

챗봇 스토리 작성에 쓰면 좋은 TOOL Twine

깽필이 — Tue, 17 Sep 2024 14:35:17 +0900

Twine은 상호작용적이고 비선형적인 이야기를 만들 수 있는 오픈 소스 도구입니다.

사용자는 코딩 지식 없이도 간단한 스토리를 작성할 수 있으며, 필요에 따라 변수, 조건 논리, 이미지, CSS, JavaScript 등을 사용해 이야기를 확장할 수 있습니다.

Twine은 HTML 형식으로 게시되므로 웹 브라우저에서 쉽게 공유할 수 있으며, 상업적 용도로도 자유롭게 사용할 수 있습니다 다양한 스토리 포맷을 통해 텍스트와 이미지 표시, 사운드 및 비디오 재생 등 다양한 상호작용을 제공할 수 있습니다. Twine은 텍스트 기반 스토리텔링에 강점을 가지며, 분기형 내러티브를 시각화하여 쉽게 작성할 수 있도록 설계되었습니다.

필자가 작성해본 간단한 주방기구 온라인몬 구매 스토리

HTML 다운로드가 가능하여 작성한 스토리를 손쉽게 공유할 수 있다.

VUI(음성 사용자 인터페이스) 시스템 설계를 위한 흐름도 작성 가이드

깽필이 — Tue, 17 Sep 2024 13:49:01 +0900

음성 사용자 인터페이스(VUI)를 설계할 때, 다양한 샘플 대화를 작성하고 검토한 후 시스템의 흐름을 스케치하는 것이 다음 단계입니다.

이 흐름도는 VUI 시스템에서 사용자가 따라갈 수 있는 모든 경로를 시각적으로 나타낸 다이어그램입니다. 특히 IVR(음성 응답 시스템)을 설계할 때는 이러한 흐름도를 **콜플로우**라고 부르며, 시스템 내에서 사용자가 선택할 수 있는 모든 분기점을 보여줍니다.

이러한 흐름도의 상세 수준은 설계하는 시스템의 유형에 따라 달라집니다. IVR 시스템이나 닫힌 대화 구조에서는 사용자가 선택할 수 있는 모든 분기점을 포함해야 합니다. 예를 들어, 대화의 각 단계에서 사용자가 다음 상태로 분기할 수 있는 모든 방법을 나열해야 합니다. 이는 "예" 또는 "아니오"와 같은 단순한 선택부터 1,000개의 노래 제목 중 하나를 선택하는 복잡한 경우까지 다양합니다. 다이어그램에 사용자가 말할 수 있는 모든 구절을 나열할 필요는 없지만, 적절하게 그룹화하는 것이 중요합니다.

가상 비서처럼 더 개방된 시스템의 경우, 흐름도를 상호작용 유형별로 그룹화할 수 있습니다. 예를 들어, 일정 관리, 검색, 전화나 문자 발송 등 상호작용의 유형에 따라 흐름을 나누는 것입니다. 이러한 경우 모든 가능한 상호작용을 나열할 수는 없지만, 다양한 의도를 그룹화하면 도움이 됩니다.

이러한 흐름도를 작성하는 데는 yEd, Omnigraffle, Google Draw, Visio 등의 도구를 사용할 수 있으며, 스토리 빌딩 도구인 Twine도 이 단계에서 유용하게 활용될 수 있습니다.

위의 그림(2-5)은 모든 분기를 포함한 샘플 흐름도를 보여줍니다.

구글 클라우드 무료 서비스 정리 문서

깽필이 — Mon, 16 Sep 2024 15:07:00 +0900

구글 클라우드에서는 처음 계정을 생성할시 90일 동안 무료로 사용할 수 있는 300 달러의 크레딧과 서비스를 무료 등급 범위 내에서 사용할 수 있는 두가지 무료 서비스를 제공하고 있습니다.

300달러의 크레딧은 어떤 서비스의 어떤 서비스 등급으로 사용하더라도 90일 동안 무료이지만

무료 등급의 서비스의 경우에는 지정된 서비스와 일정 등급을 넘어가 사용하게되면 과금이 청구되니 주의해서 사용하시면 됩니다.

90일, $300 무료 체험판: 신규 Google Cloud 및 Google Maps Platform 사용자는 Google Cloud 및 Google Maps Platform 제품과 서비스를 탐색하고 평가할 수 있는 $300의 무료 Cloud Billing 크레딧이 포함된 90일 무료 체험 기간을 활용할 수 있습니다. 이 크레딧은 다음 단일 제품 또는 제품의 조합에 사용할 수 있습니다.

무료 등급: 모든 Google Cloud 고객은 지정된 월간 사용량 한도 내에서 Compute Engine, Cloud Storage, BigQuery와 같은 일부 Google Cloud 제품을 무료로 사용할 수 있습니다. 무료 등급 한도 내에서는 리소스 사용에 대해 무료 체험판 크레딧이 차감되거나 체험판이 종료된 이후에 Cloud Billing 계정의 결제 수단으로 요금이 청구되지 않습니다.

Google Cloud 무료 프로그램 | Google Cloud Free Program

이 페이지는 Cloud Translation API를 통해 번역되었습니다. 의견 보내기 Google Cloud 무료 프로그램 컬렉션을 사용해 정리하기 내 환경설정을 기준으로 콘텐츠를 저장하고 분류하세요. Google Cloud의 기본

cloud.google.com

무료 등급의 서비스 내역

SQL(big query) 연도별, 분기별, 월별 ,날짜별 집계 하는법

깽필이 — Fri, 25 Mar 2022 20:48:17 +0900

엑셀로는 용량이 커서 다루기 힘든 데이터는 주로 sql문을 통해서 데이터 분석이 이루어지는데요.

하지만 이 sql 문이 실행되기 위해 필요한 DB(데이터 베이스)는 관리한다는게 쉬운 일이 아니더라구요...

컴퓨터에 설치도 오래걸리고, csv 파일을 db로 옮길때 컴퓨터 시스템 설정이 다르면 에러도 많이 났었어요..

구글의 데이터 웨어하우스 서비스인 빅쿼리

그래서 최근에 설치없이 DB를 사용할 수 있는 구글의 big query를 사용하기로 결정하였습니다.

오늘은 bigquery를 이용한 날짜에 따른 매출 집계를 sql문으로 해보려고 합니다.

사용할 데이터는 데이터 예측모델 및 분석 대회 플랫폼인 Kaggle에서 얻은 데이터 입니다.

https://www.kaggle.com/competitions/store-sales-time-series-forecasting/data

Store Sales - Time Series Forecasting | Kaggle

www.kaggle.com

현재 데이터 세트와 스키마 구조는 이렇습니다.(잘 모르시겠으면 넘어가셔도 되요!!)

연도별, 월별, 날짜별로 매출 합계 구하기!(sql 함수 extract)

사용할 sql의 함수는 extract인데요. sql의 날짜열(칼럼)에서 년도, 월, 일, 요일을 분리해서 새로운 칼럼을 만들어주는 함수입니다. 빅쿼리 문서에 extract함수 관련 내용이 있어 링크 남겨요!

https://cloud.google.com/bigquery/docs/reference/standard-sql/date_functions?hl=ko#extract

날짜 함수 | BigQuery | Google Cloud

의견 보내기 날짜 함수 BigQuery는 다음 DATE 함수를 지원합니다. CURRENT_DATE CURRENT_DATE([time_zone]) 설명 지정된 시간대 또는 기본 시간대를 기준으로 현재 날짜를 반환합니다. 인수 없이 호출되면 괄호

cloud.google.com

출처: google big query 문서

설명

지정된 날짜 부분에 해당하는 값을 반환합니다. part는 다음 중 하나여야 합니다.

DAYOFWEEK: 한 주의 첫날이 일요일인 [1,7] 범위의 값을 반환합니다.
DAY
DAYOFYEAR
WEEK: [0, 53] 범위에서 날짜의 주 번호를 반환합니다. 주는 일요일부터 시작되며 그 해의 첫 번째 일요일 이전 날짜는 0번째 주에 속합니다.
WEEK(<WEEKDAY>): [0, 53] 범위에서 해당 날짜의 주 번호를 반환합니다. 주는 WEEKDAY에 시작됩니다. 그 해의 첫 번째 WEEKDAY 이전의 날짜는 0번째 주에 속합니다. 유효한 WEEKDAY 값은 SUNDAY, MONDAY, TUESDAY, WEDNESDAY, THURSDAY, FRIDAY, SATURDAY입니다.
ISOWEEK: date_expression의 ISO 8601 주 번호를 반환합니다. ISOWEEK는 월요일에 시작됩니다. 반환 값은 [1, 53] 범위에 속합니다. 각 ISO 연도의 첫 번째 ISOWEEK는 태양력 연도의 첫 번째 목요일 이전의 월요일에 시작됩니다.
MONTH
QUARTER: [1,4] 범위의 값을 반환합니다.
YEAR
ISOYEAR: date_expression이 속한 주의 목요일을 포함하는 태양력 연도인 ISO 8601 주 번호 지정 연도를 반환합니다.

반환 데이터 유형

INT64

select
    T.date AS date,
    extract(year FROM T.date) AS year,
    extract(month FROM T.date) AS month,
    extract(day FROM T.date) AS day,
    extract(dayofweek FROM T.date) As day_of_week,
    CAST(SUM(T.sales) AS int) AS total_sales

from market_product_sales.train AS T

GROUP BY
        T.date,
        extract(year FROM T.date),
        extract(month FROM T.date),
        extract(month FROM T.date),
        extract(day FROM T.date),
        extract(dayofweek FROM T.date);

쿼리 실행결과 원래는 yyyy-mm-dd형식만 있었지만 year, month, day, day_of_week가 추가 되었습니다.

day_of_week의 숫자의 의미는 1:일요일 , 2:월요일, 3:화요일,... 7:토요일으로 구성되어 있습니다.

빅쿼리는 BI 프로그램인 tableau와도 연동이 됩니다. 빅쿼리에서 나온 뷰를 테이블로 저장해주고 테이블을 태블로오 연동을 해주었어요. 요일별 매출의 숫자를 요일이름으로 바꾸어 주었으면 좋았을텐데 아쉽네요..

다음에 도전해볼려구요!

파이썬으로 중복 파일 제거하기

깽필이 — Thu, 22 Apr 2021 20:49:06 +0900

종종 사진을 다운받다보면 똑같은 사진들을 중복 되게 받아지는 경우가 있습니다.

이런경우 컴퓨터에서 같은 사진의 경우 자동으로 (1) 혹은 (2)로 붙게 되는데요.

파이썬으로 이런 문제를 해결할 방법이 있어 공유하고자 합니다.

우선 전체 코드는 다음과 같습니다.

import os

photo_list = []

#listdir은 폴더안에있는 파일들의 목록을 출력하는 함수 입니다.

for f in os.listdir('C:/Users/문갱필/Desktop/파이썬/밀푀유'):
    if '(1).jpg' in f:
        photo_list.append(f)
#중복된 파일인 (1)이 붙어있는 파일든만 모은거에요
photo_list

photo_list를 출력해주게 되면

요런식으로 중복된 파일명이 리스트로 출력됩니다.

이후 unlink함수를 이용해 해당 파일을 지워줍시다.

for 문을 이용해서 그파일의 경로를 대입해줬어요.

#unlink는 파일을 지워주는 함수입니다
#폴더의 주소를 입력하면 지워지는 형태이니 for 문을 통해 반복적으로 넣어주었어요
from os import unlink
for i in photo_list:
    delete_file = 'C:/Users/moonk/macaron/' + i
    unlink(delete_file)

그 결과

파일중 (1)이 붙어 있는 파일은 지워졌습니다.

이제 (2)가 있는 파일을 지워야겠죠?

코드를 실행결과

중복파일인 (1)과 (2)가 붙어있던 파일들이 사라졌습니다. 문제해결 끝!

*jupyter notebook에서 실행되었습니다*

밀의 종류와 베이킹(색깔 편)

깽필이 — Wed, 14 Aug 2019 22:04:23 +0900

우리가 베이킹할 때 흔히 쓰는 일반밀인 T. aestivum 종

일반밀(학명:Triticum aestivum)

T. aestivum // 출처: https://www.tasaco.com/Seed.aspx?cesit=38

우리가 알고 있는 흔한 밀이죠?

이 밀은 붉은색을 띠는 종류와 하얀색을 띠는 종류로 나뉘어요

출처:https://www.melskitchencafe.com/wheat-and-wheat-grinding-101-the-wheat-types-where-to-buy-and-what-to-make/

왼쪽: 단단한 하얀 밀

오른쪽: 단단한 붉은 밀

맨 위: 부드러운 하얀 밀

색의 차이가 정말 있네요!

이런 도정된 밀가루만 보다 보니 저도 이글 쓰면서 처음 알았아요.ㅎㅎ

왜 이런 색깔의 차이게 생기게 되냐면요.

밀 낱알의 바깥층의 불그스름한 색소의 유무에서 하얀 밀인지 붉은 밀인지가 나뉜다고 해요.

하지만 단지 색의 차이라면 이 글을 쓰지 않았겠죠?

붉은 밀과 하얀 밀은 단지 색깔뿐만 아니라 단백질 함량에서도 차이가 있다고 합니다.

붉은 밀이 하얀 밀 보다 좀 더 높은 단백질 함량을 가지고 있어요!

(사실 조금 차이밖에 안남..)

베이킹에서는 밀가루의 단백질 함량이 중요하게 고려되니

베이킹을 하실 때 고려하시면 좋을 거 같아요!.

예를 들면, 제가 참조하면서 보고 있는 글에는 이런 질문이 나와 있어요.

붉은 밀(hard red wheat)과 하얀 밀(hard white wheat) 어느 걸 써야 될까요?

우선 질감에서 차이가 있어요!

붉은 밀은 단백질 함량이 더 높아서 투박하고 좀 더 질감이 단단한 빵덩이를 만들고

하얀 밀은 보통의 단백질 수준이라 좀 더 질감이 부드러운 빵 덩이를 만든다고 하네요

그럼 맛에서도 차이가 있을까요?

단단한 붉은밀의 어두운 겨가 견과 맛(어떨 때는 좀 쓴)을 내고

부드러운 하얀밀의 밝은 겨가 달고 온화한 맛을 낸다고 해요

아래 주소의 글을 참조하여 포스팅을 하였습니다.

https://www.bobsredmill.com/blog/healthy-living/hard-red-wheat-vs-hard-white-wheat/

추가로 책에서 본 밀가루의 종류에 따른 사용특성에 대해 적고 포스팅을 마치겠습니다.

출처:Wheat Flour/Author(s): William A. Atwell, Sean Finnie/Series: Practical Guides for the Food Industry

분류	일반적 특성	일반적 사용
겨울에 심은 딱딱 붉은 밀	높은 단백질, 강한 글루텐,높은 수분 흡수	빵, 관련 제품
겨울에 심은 부드러운 밀	낮은 단백질, 약한 글루텐,낮은 수분 흡수	케이크,쿠키,패스트리,파이 크러스트 크래커, 비스킷
봄에 심은 부드러운 딱딱 붉은 밀	높은 단백질,강한 글루텐,높은 수분흡수	빵,베이글,프레첼,관련 제품들
딱딱 하얀거	높은 단백질, 강한 글루텐,높은 수분흡수,겨가 색소가 부족함	빵, 관련제품들
부드러운 하얀거	낮은 단백질,약한 글루텐,낮은 수분 흡수,겨의 색소가 부족함	국수,크래커,웨하스, 반점이 나서는 안되는 제품들?
듀럼밀(파스타 만들때 쓰는 밀임)	높은 단백질.강한글루텐,높은 수분흡수	파스타

#밀의종류 #베이킹 #redwheat #whitewheat #붉은밀

#하얀밀 #밀가루 #밀과베이킹 #일반밀 #빵의질감 #질감 #빵의맛