본문 바로가기
반응형

전체보기119

[tensorflow] dataframe 만들고 dataframe으로 학습시키기 DataFrame 생성하기 pandas 라이브러리가 csv, excel을 다룰 때 사용된다. DataFrame 생성 data_ex={'a':[1,2,3],'b':[10,20,30],'c':[100,200,300]} df_ex=pd.DataFrame(data_ex) df_ex a b c 0 1 10 100 1 2 20 200 2 3 30 300 다음과 같은 형태의 데이터 프레임이 생성된다. 생성한 데이터 프레임 저장하기 train_df.to_csv(train_csv_path, index=False) test_df.to_csv(test_csv_path, index=False) 데이터 프레임으로 학습 데이터 전처리 1. csv 데이터를 불러온다 test_df=pd.read_csv('test_dataset.cs.. 2021. 1. 25.
[tensorflow] ImageDataGenerator로 생성한 이미지 데이터로 학습 이미지 데이터 분석 *mnist 데이터 사용 이미지 분석을 하기 전에 데이터 분석을 해야 한다. 내가 가진 mnist 이미지 데이터는 각 레이블 값이 폴더명이고 폴더에는 폴더명에 해당하는 이미지들이 저장된 상태다. 레이블은 0부터 9까지 총 10개다. 각 레이블마다 몇개의 데이터가 있는지 확인하는 과정 nums_dataset=[] for lbl_n in label_nums: data_per_class=os.listdir('../dataset/mnist_png/training/'+lbl_n) len(data_per_class) nums_dataset.append(len(data_per_class)) 해당 코드를 실행하고 nums_dataset을 확인하면 각 레이블 마다 몇 개의 데이터가 있는지 확인할 수 .. 2021. 1. 25.
[PyTorch] PyTorch로 CNN 레이어 쌓기 레이어 이해하기 1. Convolution - in_channels: 받게 될 channel의 갯수 - out_channels: 보내고 싶은 channel의 갯수 - kernel_size: 만들고 싶은 kernel(weights)의 사이즈 layer = nn.Conv2d(1, 20, 5, 1).to(torch.device('cpu')) - 해당 레이어에 이미지 넣은 output 결과를 시각화하기 위한 작업 output_data = layer(image) output = output_data.data.cpu().numpy() 2. Pooling - input을 먼저 앞에 넣고, 뒤에 kernel 사이즈와 stride를 순서대로 넣음 pool = F.max_pool2d(image, 2,2) #MaxPool .. 2021. 1. 17.
[Tensorflow] 텐서플로우를 사용한 CNN 모델 학습&평가하기 모델을 학습시키기 전에 설정할 것 1. Loss Function - crossentropy 사용 - 그 중 sparse_categorical_crossentropy 사용 2. Metrics : 모델 평가 방법 - accuracy 사용 - accuracy가 가장 흔히 사용됨 #accuracy 설정하는 방법 1 metrics = ['accuracy'] #accuracy 설정하는 방법 2 tf.keras.metrics.Accuracy() 3. compile : Optimizer 적용 - 여러 optimizer 중 Adam으로 적용해준다. 모델 학습 1. 학습에 사용할 데이터셋 준비 - 사용한 데이터셋 : MNIST - 데이터 셋의 차원을 확인하고 gray scale이라면 차원을 하나 늘려주는 과정이 필요하다 .. 2021. 1. 17.
반응형

티스토리툴바