딥러닝 중 UnidentifiedImageError: cannot identify image file 의 에러가 나올때

dataloader에서 이미지를 뽑아 모델에 넣어 성능 평가를 하려고 하는데.. PIL.UnidentifiedImageError: cannot identify image file 이런 에러가 나는데 /content/notMNIST_large/D/VHJhbnNpdCBCb2xkLnR0Zg==.png 파일에 무슨 문제가 있는 것이 아닐까? 생각을 해봤다 os.listdir로 일단 파일이 실제 있는지 확인을 해본다 그래서 PIL.Image.open을 이용해서 open을 해보려고 하면 다른 파일로 한번 open을 해보면 문제 없이 열리긴 한다 파일이 있다는 것은 확인했는데.. 안열린다면.. 그 파일이 문제겠지 os.path.getsize()는 해당 경로의 파일의 용량을 알려준다 0바이트라 데이터 파일이 깨져있나보..

• format_list_bulleted 프로그래밍/Python
• · 2024. 4. 22.
• textsms

구글드라이브로 대용량 데이터를 다룰 때 필요한 테크닉(압축해제, 자동압축, 파일 크기 확인방법)

구글 드라이브의 한 폴더 내에 너무 많은 데이터가 있을 경우, colab에서 구글 드라이브로 연동할때, 파이썬이 구글 드라이브의 폴더 내의 데이터에 제대로 접근하지 못한다 그래서 한 폴더당 10000개 이내로 데이터를 분할해서 저장해두는게 유리하다 --------------------------------------------------------------------------------------------------------------------- 개인 드라이브에서 구글 드라이브로 데이터를 옮길때, 압축된 상태에서 옮기고 연동한 다음 파이썬으로 압축을 해제해서 사용하는게 유리할 수 있다 colab으로 구글 드라이브로 연동한 다음, 구글 드라이브의 zip파일을 압축해제하면 된다 https://cod..

• format_list_bulleted 프로그래밍/Python
• · 2024. 1. 14.
• textsms

컴퓨터 운영체제(operating system), 파일 시스템(file system), 터미널환경(console, terminal)

1. 컴퓨터 운영체제(operating system) 컴퓨터 프로그램이 동작할 수 있는 구동환경 마우스, 키보드, cpu 등 하드웨어와 애플리케이션 등의 소프트웨어를 연결해주는 수단 애플리케이션과 의존적이다(dependent) 예) exe파일은 윈도우에서는 가능하나 맥os에서는 불가능 2. 파일 시스템(file system) 파일은 컴퓨터 등에서 의미있는 정보를 담은 논리적인 단위 디렉토리(directory)는 파일과 디렉토리를 포함하는 것으로 윈도우에서 폴더라고 부르는 것 파일은 고유한 경로를 가지는데 절대경로와 상대경로가 존재 1) 절대경로: 루트 디렉토리부터 타깃 파일까지 2) 상대경로: 현재있는 디렉토리부터 타깃파일까지 3. 터미널환경(console = terminal) 마우스가 아닌 키보드로 명..

• format_list_bulleted 컴퓨터과학(CS)
• · 2024. 1. 2.
• textsms

Java 기본 배우기 -컴퓨터 기본상식, 자바가상머신-

1. 프로그램(program) 컴퓨터에서 실행될 때 특정 작업을 수행하는 일련의 명령어들의 모음, 집합 2. 운영체제(Operating system, OS) window, Ios, linux, android, mac, ... 시스템 하드웨어를 관리 + 사용자와 상호작용하는 것을 도와주는 소프트웨어 응용 소프트웨어를 실행하기 위해 하드웨어 추상화 플랫폼과 공통 시스템 서비스를 제공하는 시스템 소프트웨어 운영체제도 하나의 프로그램 하드웨어 = 키보드, 마우스, 모니터, .... 3. 컴퓨터 자료표현 3-1) 비트(bit, binary digit) 컴퓨터가 값을 저장할 수 있는 최소 단위 하나의 비트는 2가지 정보 0,1을 표현 그러면 비트가 2개라면? 2*2 = 4가지, >>> 00,01,10,11 비트가 ..

• format_list_bulleted 프로그래밍/Java
• · 2023. 1. 28.
• textsms

os 모듈 완벽 활용법

1. 현재 작업 디렉토리 설정 VScode에서 ‘py파일 - code로 열기‘ 열 때   폴더 열기를 누르고 현재 작업 디렉토리를 설정함..

• format_list_bulleted 프로그래밍/Python
• · 2022. 7. 23.
• textsms