프로도의 블로그

DataFrame.iloc 정의 - 정수 값을 이용해 데이터프레임의 특정 위치를 인덱스 기반으로 선택한다. .iloc[]는 주로 0부터 축의 길이 -1 사이의 정수값으로 사용 가능 가능하지만, boolean array를 사용할 수도 있다. 아래와 같이 이용 가능하다 An integer, e.g. 5.A list or array of integers, e.g. [4, 3, 0].A slice object with ints, e.g. 1:7.A boolean array.A callable function with one argument (the calling Series, DataFrame or Panel) and that returns valid output for indexing (one of the a..

국세청, '빅데이터' 본격 가동…과세 그물망 더 촘촘해진다 출처: 차세대국세행정시스템(NTIS)으로 과거와 비교할 수 없을 정도로 고도화된 정보 시스템을 갖춘 국세청은 '빅데이터 분석 기법'을 활용해 한층 정교한 세금 사전안내 자료를 납세자들에게 제공할 예정이라고 밝혔다. 국세청은 카카오페이 등 핀테크 결제자료, 건강보험 청구정보, 국고보조금 집행내역 등 외부기관의 과세자료를 지속적으로 모으고, 기존 데이터와의 통합 분석을 강화해 다양한 안내자료를 제공할 방침이라고 밝혔다. Google Python Style Guide 출처: 한국가스안전공사, 4차산업혁명 대비...빅데이터 기반 기술개발 추진 출처: 한국가스안전공사 가스안전연구원이 오는 12월까지 빅데이터를 활용한 지능형 도시가스 배관 위험 예측 관리 ..

벡터의 크기를 구하는 방법을 알아보자. 그리고 2개의 백터가 있을 때 벡터의 합을 구하고 그다음 벡터의 크기를 구하는 방법을 알아보자. A벡터와 B벡터의 합을 통해 벡터 C 구하기 평면\(\vec{a}=(a_1,a_2),\ \vec{b}=(b_1,b_2)\)\(\vec{a}의\ 크기=|\vec{a}| 또는 ||\vec{a}||\)\(\vec{|a|}=\sqrt{a_1^2+a_2^2}=\sqrt{\sum_{k=1}^{N}a_k^2}\) = Euclidean norm\(\vec{b}의\ 크기=|\vec{b}| 또는 ||\vec{b}||\)\(\vec{|b|}=\sqrt{b_1^2+b_2^2}\)\(\vec{a}+\vec{b} = (a_1+b_1,\ a_2+b_2)\) ==> 벡터 a와 벡터 b의 합\(|\v..

MIT 연구, 인공지능으로 스트리밍 영상 화질 최적화에 성공 출처: 인터넷 속도가 낮아도 동영상을 끊지기 않고 시청할 수 있을 것 같다. 많은 고객 데이터가 쌓이니 기계학습을 이용해 개선 시킬수 있나보다. “스마트팩토리가 고도화되면 에너지효율도 높아져” 출처: “스마트팩토리의 추진을 통해 얻을 수 있는 가장 큰 이점은 에너지 절감과 프로세스의 최적화로 볼 수 있다. 스마트팩토리가 고도화될수록 에너지 절감효과도 동반 상승할 것으로 보인다. 산업계에서 전기가 크게 소모되는 현장 중 70~80%가 공장으로, 이곳에서 소모되는 전기 중 모터의 전기소모량이 매우 크다. 때문에 실제 부하측에서 요구되는 만큼만 효율적으로 모터를 제어/운용하게 되면 손쉽게 에너지 효율을 높일 수 있다.”고 언급했다. 딥러닝을 위한 T..

파이썬으로 구현한 다양한 알고리즘에 대해서 코딩을 해보려고 한다. 우선 절대값 알고리즘을 만들었다. 절대값은 2가지 방법으로 만들 수 있다. 첫 번째 방법은 입력된 값이 0보다 크면 그대로 출력하고, 작으면 마이너스를 붙여서 출력한다. 이는 -1을 곱한 것과 같다고 보면 된다. 두 번째 방법은 입력된 값을 제곱하여 양수로 변경후 루트를 이용하여 다시 제곱하기 전의 값으로 만든다. 그러면 음수만 양수로 되는 효과를 얻을 수 있다. import math # 첫 번째 절대값 알고리즘 def abs_sign(num): if num >= 0: return num else: return -num # 두 번째 절대값 알고리즘 def abs_square(num): result = num * num return int(..

벡터의 내적은 수학뿐만 아니라 물리에서도 아주 중요하게 생각하는 개념이다. 벡터의 내적이 벡터의 곱셈과 같다고 생각해도 된다. 벡터의 곱셈에는 크게 2가지가 있다.1) 외적 : 크기와 방향을 갖는 벡터2) 내적 : 스칼라(실수) 벡터 내적의 정의 \(\vec{OA}= \vec{a}\) \(\vec{OB}= \vec{b}\) \(0 \leq \theta \leq \pi \) \(\theta\)(세타)는 A와 B의 시작점을 O으로 일치 시켜놓은 상태에서 이루는 각을 의미한다. \(\vec{a}\cdot\vec{b}\)는 벡터의 내적을 의미한다. 벡터의 내적은 inner product 또는 dot product라고 부른다. 벡터의 내적은 \(\cdot\)을 사용한다.외적에서는 \(\times\)를 사용한다. ..

머신러닝 공부를 하다보면 수학 공부를 할 수 밖에 없고, 그러면 수학공식을 알아야 할 수 밖에 없다. 그런데 블로그에서 공부를 하기 위해서 수학공식을 입력하려면 한글이나 워드 프로그램 처럼 수식을 입력해주는 기능이 없기 때문에 난감하다. 이럴 때 이용할 수 있는 방법이 LateX를 이용하는 것이다. 하지만 네이버 블로그나 티스토리에서도 기본적으로 LaTex 입력을 지원하지 않는다. 글쓰기 페이지의 상단 메뉴 중 "수식입력"을 이용하면 수학공식을 이용할 수 있다. 단, 기호가 예쁘게 안나오고, 글을 쓰다 중간에 흐름이 끊기는 단점이 있다. 이 때 가장 쉽게 사용할 수 있는 방법이 mathjax.org에서 제공하는 LaTeX 입력을 인식해주는 자바스크립트를 이용하는 것이다. 이용법은 간단하다. 아래와 같이 ..

류비셰프는 8시간 이상 수면을 하고 운동을 하는 등 개인의 삶도 즐기면서 살았다. 그는 자신의 삶에서 '예외'를 허용하지 않았다. 지적 호기심과 욕구가 매우 강하고 자신이 원하는 지식을 얻고 스스로 만족할만한 삶을 살기 위해 시간을 정복하기로 했다. 하지만 목표는 "삶에 예외를 허락하지 않고 매일 같은 자세를 견지하자" 이었다. 목표를 정하는 것보다 이 목표를 단 하루도 예외없이 지켰다고 한다. 우리가 어떠한 목표를 세웠을 때 이 목표를 이루지 못하게 만드는 가장 큰 원인이 "예외"이다. 이러한 예외들이 모이면 목표를 이룰 수 없는 핑계가 된다. 류비셰프는 자투리 시간을 잘 활용했다. 이동 중이거나, 기다리는 시간이나 짧은 자투리 시간을 활용하기 위한 계획을 따로 세웠다. 외국어를 학습할 때도 자투리 시..

IBM, 딥러닝 학습 속도 높이는 새 기술 개발 출처: IBM은 딥러닝 모델 학습 시 여러 물리 서버로 자동 분산하는 새로운 기술 DDL(Distributed Deep Learning)을 공개 했다. 다만 IBM 파워AI 4.0 S/W에서만 작동되고 이 것은 IBM 하드웨어 시스템에서만 작동한다 앤드류 응 "AI로 AI가 만드는 문제 해결한다" 출처: 앤드류 응은 '17년 3월 바이두를 나와서 deeplearning.ai 라를 스타트업을 만들었다. 기본적인 컴퓨팅 능력이 있으면 딥러닝을 쉽게 배울 수 있게 하는 것이 목표다. 코세라에 "Deep Learning Specialization이라는 강의도 오픈했다.(https://www.coursera.org/specializations/deep-learnin..

하둡과 스파크를 활용한 실용 데이터 과학(Practical Data Science with Hadoop and Spark) 출처: 호튼웍스의 데이터 과학자가 지은 도서 출판 예정 [리얼 실리콘밸리] 완전히 다른 방식의 지상 최강 언론사, 구글 출처: 구글은 인공지능을 이용해서 기사를 작성하는 프로젝트를 진행했다. 그 중 로컬 뉴스를 제작하겠다고 발표했다. 중소 규모의 지역 언론사가 사라진 틈새를 노린 것이다. 인공지능이 전문 기자처럼 주제를 잡는 것부터 시작하는 기사를 작성하기는 어렵지만 헐리우드의 여배우가 부족하다는 기사를 작성한 것 처럼, 빅데이터를 분석한 인사이트를 도출하는 기사 작성에는 강점이 있다. 알파고가 바둑에서 기사들이 두는 것과 다른 방식으로 접근한 것처럼 기사 작성에도 다른 방법으로 접..