(데이터 엔지니어 모임을 위한 책나눔) 오토케라스로 만드는 AutoML 안녕하세요. prodo입니다. 저와 같이 온프레미스 환경에서 ML을 사용해야 하는 상황에서 AutoML을 사용해서 비즈니스적으로 효과가 있는지 빨리 확인해볼 수 있는 경험을 필요로 하는 분들을 위해서 이 책을 번역했습니다. 총 2 분께 책을 나눌수 있는 좋은 기회가 생겨서 이 글을 적어봤습니다. 신청 방법 : 댓글로 이메일 주소를 남겨주시면 됩니다. 마감일시 : 2023년 6월 12일 18시 오토케라스로 만드는 AutoML - YES24 글쓰기(Writing) 2023.06.05
git 아이디 비밀번호 저장하기 아래와 같이 두개의 명령어를 실행한다. git config --global credential.helper store git pull https://stackoverflow.com/questions/35942754/how-can-i-save-username-and-password-in-git Git 2023.04.13
사용중인 docker container를 docker image로 만들기 아래 container이름은 이미지로 생성하고 싶은 container의 이름을 넣으면 되고, REPOSITORY:TAG는 생성할 이미지에 대해서 넣어주면 된다. docker commit {container 이름} 이미지명:TAG 아래 명령어를 이용해서 이미지가 만들어 졌는지 확인합니다. docker images 도커(Docker) 2023.04.06
docker image platform 선택해서 사용하기 아래와 같이 platform을 사용하면 된다. docker pull --platform linux/arm64 alpine:latest 도커(Docker) 2023.04.03
apache superset에서 좌측, 상단 메뉴 숨기기 아래와 같이 URL에 파라미터를 추가하면 메뉴를 숨길 수 있습니다. http://localhost:8088/superset/dashboard/my-dashboard/?standalone=1&show_filters=0 Customizing dashboard The following URL parameters can be used to modify how the dashboard is rendered: standalone: 0 (default): dashboard is displayed normally 1: Top Navigation is hidden 2: Top Navigation + title is hidden 3: Top Navigation + title + top level tabs are hidd.. 빅데이터(BigData)/시각화 2023.03.21
docker image를 파일로 저장하고 다시 로드 하는 방법 Docker 이미지를 파일로 내보내는 방법은 docker save 명령어를 사용하는 것입니다. docker save 명령어는 지정된 이미지나 이미지들을 tar 파일로 내보내는데, 이 파일은 다른 시스템에서 docker load 명령어를 사용하여 Docker 이미지로 복원할 수 있습니다. 다음은 docker save 명령어를 사용하여 이미지를 파일로 내보내는 예시입니다. docker save -o .tar : 위 명령어에서 -o 옵션은 출력 파일의 이름을 지정하는 것이고, :는 내보내려는 이미지의 이름과 태그입니다. 예를 들어, my-web-app:latest 이미지를 my-web-app.tar 파일로 내보내는 경우 다음과 같이 실행할 수 있습니다. docker save -o my-web-app.tar m.. 도커(Docker) 2023.03.10
superset의 superset_config.py 값 바꾸기 docker-compose로 만든 supserset 컨테이너는 아래와 같은 방법으로 속성 값을 변경할 수 있습니다. SUPERSET_WEBSERVER_TIMEOUT 속성 변경 {superset 도커파일 경로}/docker/pythonpath_dev/superset_config.py를 vi로 실행 파일 하단에 SUPERSET_WEBSERVER_TIMEOUT=120 /superset 도커파일 경로로 이동 docker-compose down으로 현재 컨테이너 삭제 docker-compose -f docker-compose-non-dev.yml up -d docker inspect superset_app 을 실행하면 추가한 속성 정보를 확인할 수 있음 https://stackoverflow.com/questio.. 빅데이터(BigData) 2023.03.06
Docker 명령어 호스트에서 도커 명령어 실행시키기 docker exec one ping two docker-compose로 image 파일 업데이트 하기 docker-compose를 하기 전에 이미지 파일들을 최신 버전드로 업데이트 하기 위해서는 아래 명령어를 이용합니다. docker-compose pull docker image를 삭제해도 already exist 라고 나올 경우, 캐시를 삭제하면 됩니다. docker system prune -a docker pull always show "Already exists" for layers during pull even after deleting all images - Stack Overflow 도커(Docker) 2023.01.17
t-test를 이용해서 두 집단간의 차이를 검정하는 방법 두 집단 수가 동일할 경우 먼저, 두 집단 간의 평균 방문 일자의 차이를 확인하기 위해서는 scipy 패키지의 ttest_ind 함수를 사용할 수 있습니다. 이 함수는 두 개의 집단 간의 평균의 차이가 유의한 차이가 있는지 검정할 수 있는 t-검정을 수행합니다. 다음은 파이썬 코드 예시입니다. from scipy import stats # 두 집단의 평균 방문 일자가 저장된 데이터 group1 = [1, 2, 3, 4, 5] group2 = [3, 4, 5, 6, 7] # ttest_ind 함수를 사용해 t-검정을 수행 t_statistic, p_value = stats.ttest_ind(group1, group2) # 검정 결과 출력 print("t-statistic:", t_statistic) pri.. 통계(Statistics) 2022.12.23
mysql에서 날짜 처리하기 요일 계산하기 DATE_FORMAT 함수를 사용합니다. DATE_FORMAT 함수는 주어진 날짜와 원하는 형식으로 날짜를 표시할 수 있게 해줍니다. 요일을 구하려면 '%W' 포맷 스트링을 사용합니다. SELECT DATE_FORMAT('2022-10-10', '%W') AS day_of_week; DAYNAME 함수를 사용합니다. DAYNAME 함수는 주어진 날짜의 요일 이름을 반환합니다. SELECT DAYNAME('2022-10-10') AS day_of_week; WEEKDAY 함수를 사용합니다. WEEKDAY 함수는 주어진 날짜가 주어진 요일 순서에서 몇 번째 요일인지를 반환합니다. 일요일을 0, 월요일을 1, 화요일을 2, 수요일을 3, 목요일을 4, 금요일을 5, 토요일을 6으로 간주합니다. .. 데이터베이스(Database)/mysql 2022.12.22