반응형 Microsoft/Azure ML10 Azure ml로 OH MY GIRL(오마이걸) _ Nonstop(살짝 설렜어)시계열로 조회수 예측!! 3000만은 언제 오는가....!!!!! 옴망진창 군대에서도 후배들... 음악프로 본다고 날 리 칠 때 영화나..드라마 본 내가............요즘....음악프로를 챙겨본다ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ 오! 마! 이! 걸!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!하...너무 좋아...어쩌지..... 살짝 설렜어 뮤비를 보던중...어느덧 조회수....29552534!!! 언제 3천만 될까 하던 중......내가 계산 하기로 하였다!!!! 먼저....데이터 뽑아내기.... 리얼 수동으로 데이터를 뽑아내기...정성 무엇 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ 11시부터 회사에서 확인 후 메모...10분 단위로 메모....(님 모하심.....ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ) 7개 데이터로 시계열을 먼저 돌려보았.. 2020. 6. 4. Azure ML에서 날씨정보를 이용하여 비행 지연 예측 Flight delay prediction 오늘은 Azure ML에서 제공하는 비행기 데이터와 날씨 데이터를 통해 비행 지연 여부 또는 정시 운행 여부를 두 가지 클래스로 예측할 것입니다. 비행이 지연된 경우 두 클래스는 1로, 비행 시간이 0이면 0으로 표시됩니다. Azure ML Studio에서 실험을 빌드하는 데 5 가지 기본 단계가 있습니다. 모델 만들기 1 단계 : 데이터 가져 오기 2 단계 : 데이터 전처리 3 단계 : 기능 정의 모델 훈련 4 단계 : 학습 알고리즘 선택 및 적용 모델 점수 및 테스트 5 단계 : 새 데이터 예측 데이터 미국 교통국의 TranStats 데이터 수집에서 얻은 여객 비행 정시 성능 데이터 . 데이터 집합에는 2013 년 4 월 -10 월 기간의 비행 지연 데이터가 포함됩니다. 데이터를 Azure ML St.. 2020. 5. 13. Azure ML Module List !!! Apply Filter (필터 적용) 모듈 개요 이 자료에서는 AzureMachineLearningStudio(클래식)의 ApplyFilter모듈을 사용하여 이전에 정의된 필터를 적용하여 값 열을 변환하는 방법에 대해 설명합니다. 필터는 노이즈를 줄이거나 패턴을 강조하기 위해 디지털 신호 처리에 사용됩니다. 따라서 변환하는 값은 항상 숫자이며 일반적으로 오디오 또는 시각 신호를 나타냅니다. 다른 종류의 필터를 찾고 계십니까? Studio(클래식)는 이러한 모듈에 데이터 샘플링, 데이터 하위 집합 가져오기, 잘못된 값 제거 또는 테스트 및 교육 세트 생성(분할 데이터, 누락 데이터, 파티션 및 샘플, SQL변환 적용, 클립 값)을 제공합니다. 원본에서 읽은 데이터를 필터링 해야 하는 경우 데이터 가져오기를 참조하십시오. 옵션은 원본 유형에 따.. 2020. 4. 14. Azure ML Module List !!! - Add Rows 활용하는 방법 이번에 소개할 모듈은 Add Rows 행 추가 모듈입니다. 다양한 데이터 셋으로 작업해 왔으면 데이터 셋을 결합하여 하나로 만들 수가 있고, 추가정보를 넣어야 할 때 사용합니다. 먼저 AddRows 모듈을 실험에 끌어다 놓습니다. 데이터 변환의 Manipulate범주에서 찾을 수 있습니다. 그 다음 데이터 세트를 두개의 입력 포트에 연결합니다. 추가할 데이터 세트를 두번째(오른쪽)포트에 연결해야 합니다. 그리고 열의 정보가 같아야 이어 붙여 집니다. 첫번째 데이터를 보시면 a, b, c 에 1~9 까지 있습니다. 두번째 데이터에는 a, b, c 에 10~18 까지 있습니다. 이 두 데이터는 열의 정보가 같아 이어 붙여 집니다. 붙여 보면 다음과 같이 1~18까지 이어지는 것을 볼 수 있습니다. 그러나 열.. 2020. 4. 13. Azure ML Module List !!! A부터 Z까지 - Add Columns Add Columns : 열 추가 모듈~!!!! 이 모듈을 사용하면 두 데이터 세트의 모든 열을 결합하여 단일 데이터 세트를 생성할 수 있습니다. Data transformation에 Manipulation에 가시면 Add Columns이 있습니다. 이것을 가지고 와서 아래 처럼 두 데이터를 연결합니다. 처음 데이터는 다음과 같이 1~9 까지 있구요~ 두번째 데이터는 10~ 18까지 있습니다. 연결 후 실해을 하시면 다음과 같이 두 데이터가 합쳐 집니다. 입력 데이터 세트에 동일한 이름을 가진 두개의 열이 있는 경우, 숫자 접미사가 오른쪽 입력 열에 사용된 데이터 세트의 열 이름에 추가됩니다. 예를 들어 'A' 라는 열의 인스턴스가 두개 있는 경우 오른쪽 열 이름은 'A(1)' 로 바뀝니다. 그리고 행 .. 2020. 4. 13. Azure ML One-Class Support Vector Machine 으로 빠르고 간단하게 이상징후 탐지하는 방법 Azure ML One-Class Support Vector Machine 으로 빠르고 간단하게 이상징후 탐지해볼껀데요!!! 독일 신용 카드 UCI 데이터 세트의 이상현상이 생긴 곳을 탐지 해보려구 합니다.!!! 먼저 샘플 창에서 독일 신용 카드 UCI 데이터 세트를 가지고 옵니다 !! 데이터를 열어보면 각종 정보가 있는데 각 카테고리마다 정보는 아래에 설명해 두었습니다. 그 중에서 'col 21' 높은 신용 위험 항목의 레이블은 '2' 이고, 낮은 신용 위험 항목의 레이블은 1' 이것을 이용하여 신용 위험 탐지를 할 것 입니다. Split Data를 통해서 과적합과 데이터 검증에 사용할껀데요. Stratified split를 true로 만들면 특정 기준으로 나눌 수 있는데요. 'launch column.. 2020. 3. 3. Azure ML 교차검증 Cross Validate Model 사용하기!!! 교차 검증은 데이터 세트의 가변성과 해당 데이터를 사용하여 교육된 모델의 신뢰성을 모두 평가하기 위해 기계 학습에 자주 사용되는 중요한 기법입니다. 교차검증(cross validation)은 데이트 세트의 샘플 개수가 많지 않을 때 보통 쓰입니다. 교차 검증 모형 모듈은 레이블이 지정된 데이터 집합과 숙련되지 않은 분류 또는 회귀 모형을 입력합니다. 데이터 집합을 몇개의 하위 집합(폴드)으로 나누고 각 (폴드)에 대해 모델을 작성한 다음 각 폴드에 대한 일련의 정확도 통계를 반환합니다. 정확도 통계를 비교하여 데이터 세트의 품질을 해석하고 모델이 데이터의 변화에 영향을 받는지 여부를 파악할 수 있습니다. 교차 검증에서는 데이터 집합에 대한 예측 결과와 확률도 반환되므로 예측의 신뢰성을 평가할 수 있습니다.. 2020. 2. 6. Azure ML 누락된 데이터 정리 Clean Missing Data 사용법 데이터가 다 꽉차있을 수도 있지만 종종 비어 있는 데이터가 있습니다. 물론 비어 있는 것이 정상일 수도 있지만 때로는 얻지 못해버린 정보일 수 있는데요~!!! Azure ML에서는 누락된 데이터를 어떻게 처리 할수 있는지 알아 봅시다!!! AzureMachineLearningStudio의 Clean Missing Data모듈을 사용하여 누락된 값을 제거, 교체 또는 추론을 할수 있습니다. 결측값을 자리 표시자, 평균 또는 기타 값으로 대체 결측값이 있는 행 및 열을 완전히 제거 통계적 방법에 근거한 값 추론 이것은 기존에 AzureMachineLearningStudio에 있는 헌혈 데이터인데요 아래 처럼 일부러 데이터를 지워 보았습니다. AzureMachineLearningStudio에서 가져오면 이렇게.. 2020. 1. 28. Azure ML Train Matchbox Recommender 추천 알고리즘 유튜브알고리즘나한테 이 동영상을 봐보면 어떻냐며...추천해주는데..... 이 것을 하는 방법을 알려 드리겠습니다. Azure ML Train Matchbox Recommender 박스를 활용하면 추천알고리즘을 쉽게 만들수가 있는데요.!!!!! 자!! Azure ML로 만들어 봅시다.!!!! 1. 데이터 추가 먼저 위에 파일을 다운 받아서 데이터를 마이 데이터에 추가해 봅시다 아래 새 실험을 만들때 처럼 + 쁘라스~ 뽁 누르면 여러 메뉴가 나타나는데!! 데이터 셋!! 여기에 데이터를 넣으면 실험실에서 사용할 수 있습니다. 여기에 파일을 집어 넣으면 마이 데이터 셋에서 사용가능!! 2. 데이터 구성 거기서 위에 준비한 rating, user, item 넣어 줍니다. 여기 준비한 자료는 쌤플 데이터에 있는 레.. 2019. 11. 18. 이전 1 2 다음 반응형
