Darkflow: AssertionError: bin/yolo.weights를 과도하게 읽습니다.

[업데이트]
PJ Reddie 파일이 완전히 호환되지 않는 것 같아서 README에 제공된 링크에서 미리 빌드된 가중치를 다운로드해야 합니다. https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU

문제는 이 서버 측에서 작업을 수행해야 했기 때문에 조금 파고들면 가장 간단한 해결책은 직접 다운로드 명령을 모방하는 Firefox 애드온 gcurl을 사용하는 것이었습니다.

cd darkflow/bin && \
    curl --header 'Host: doc-0k-88-docs.googleusercontent.com' --header 'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.12; rv:52.0) Gecko/20100101 Firefox/52.0' --header 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8' --header 'Accept-Language: it-IT,it;q=0.8,en-US;q=0.5,en;q=0.3' --header 'Referer: https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU' --header 'Connection: keep-alive' --header 'Upgrade-Insecure-Requests: 1' 'https://doc-0k-88-docs.googleusercontent.com/docs/securesc/ha0ro937gcuc7l7deffksulhg5h7mbp1/etft348j4r0b37n9p1jkokvbfagiimk2/1491782400000/16010642207042931662/*/0B1tW_VtY7onieS0zMzdkSG11OW8?e=download' -o 'tiny-yolo-v1.1.weights' -L && \
    curl --header 'Host: doc-08-88-docs.googleusercontent.com' --header 'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.12; rv:52.0) Gecko/20100101 Firefox/52.0' --header 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8' --header 'Accept-Language: it-IT,it;q=0.8,en-US;q=0.5,en;q=0.3' --header 'Referer: https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU' --header 'Connection: keep-alive' --header 'Upgrade-Insecure-Requests: 1' 'https://doc-08-88-docs.googleusercontent.com/docs/securesc/ha0ro937gcuc7l7deffksulhg5h7mbp1/s29gvf1n83pqr37pk2l7t2cvcjnssd8s/1491782400000/16010642207042931662/*/0B1tW_VtY7oniTjM3YUxlRHpDVW8?e=download' -o 'tiny-yolo-voc.weights' -L && \
    curl --header 'Host: doc-10-88-docs.googleusercontent.com' --header 'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.12; rv:52.0) Gecko/20100101 Firefox/52.0' --header 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8' --header 'Accept-Language: it-IT,it;q=0.8,en-US;q=0.5,en;q=0.3' --header 'Referer: https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU' --header 'Connection: keep-alive' --header 'Upgrade-Insecure-Requests: 1' 'https://doc-10-88-docs.googleusercontent.com/docs/securesc/ha0ro937gcuc7l7deffksulhg5h7mbp1/fmtsb8ruqk7a4tg5p98khj6qp4fq3p6i/1491782400000/16010642207042931662/*/0B1tW_VtY7onicFlqclhnRGlodGM?e=download' -o 'yolo-full.weights' -L && \
    curl --header 'Host: doc-0k-88-docs.googleusercontent.com' --header 'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.12; rv:52.0) Gecko/20100101 Firefox/52.0' --header 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8' --header 'Accept-Language: it-IT,it;q=0.8,en-US;q=0.5,en;q=0.3' --header 'Referer: https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU' --header 'Connection: keep-alive' --header 'Upgrade-Insecure-Requests: 1' 'https://doc-0k-88-docs.googleusercontent.com/docs/securesc/ha0ro937gcuc7l7deffksulhg5h7mbp1/knshmif3mk3n4ogtq9p77nf2f5v3dr0d/1491782400000/16010642207042931662/*/0B1tW_VtY7onibmdQWE1zVERxcjQ?e=download' -o 'yolo-tiny.weights' -L && \
    curl --header 'Host: doc-0c-88-docs.googleusercontent.com' --header 'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.12; rv:52.0) Gecko/20100101 Firefox/52.0' --header 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8' --header 'Accept-Language: it-IT,it;q=0.8,en-US;q=0.5,en;q=0.3' --header 'Referer: https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU' --header 'Connection: keep-alive' --header 'Upgrade-Insecure-Requests: 1' 'https://doc-0c-88-docs.googleusercontent.com/docs/securesc/ha0ro937gcuc7l7deffksulhg5h7mbp1/ggut18kr6ubhoc8btg5hf6f32stoh50n/1491782400000/16010642207042931662/*/0B1tW_VtY7oniZGlkLTh5YVl1WWs?e=download' -o 'yolo.weights' -L

Btw 다운로드 후 내 bin/ 폴더가 다음과 같이 링크가 영원히 작동할지 확신할 수 없습니다.

# cd darkflow/bin/
# ls -lh
total 1.6G
-rw-r--r-- 1 root root 104M Apr 10 00:20 tiny-yolo-v1.1.weights
-rw-r--r-- 1 root root  61M Apr 10 00:20 tiny-yolo-voc.weights
-rw-r--r-- 1 root root 1.1G Apr 10 00:20 yolo-full.weights
-rw-r--r-- 1 root root 173M Apr 10 00:21 yolo-tiny.weights
-rw-r--r-- 1 root root 258M Apr 10 00:21 yolo.weights

공식 YOLO의 파일은 새로운 구성을 실험할 때 항상 갱신되므로 해당 .cfg 가 릴리스되었는지 확인해야 합니다. 내가 업로드한 weights 파일은 이전 버전이며 이 저장소의 .cfg 와 호환됩니다.

@thtrieu 감사합니다. 그동안 귀하의 파일을 사용하여 해결했습니다!

이 오류는 cfg와 바이너리 가중치 파일 간의 불일치로 인해 발생합니다. 다음은 그것을 일으키는 관련 코드입니다.
flow 시작 부분에서 먼저 명령줄에서 사용자가 지정한 cfg 및 bin 에서 TFNet 초기화를 시도합니다.

# in darkflow/utils/loader.py

class weights_walker(object):
  ...
  self.size = os.path.getsize(path)

이 워커는 walk 함수로 생성되고 호출됩니다.
이 워크는 cfg에 따른 정확한 바이트 양으로 각 레이어의 bin 파일에서 가중치를 읽습니다. 실제로 읽기 전에 읽을 바이트가 파일의 나머지 바이트보다 작은지 확인합니다. 다음은 이에 대한 코드입니다.

    def walk(self, size):

        if self.eof: return None
        end_point = self.offset + 4 * size

        assert end_point <= self.size, \
        'Over-read {}'.format(self.path)

여기서 end_point 는 현재 레이어의 가중치에 대해 바이너리 파일에서 필요한 양을 읽을 때 파일 디스크립터 커서가 위치할 위치입니다. self.size 는 바이너리 파일의 전체 크기입니다. 이 두 변수를 비교하면 cfg와 bin 파일 사이에 충돌이 있는지 여부를 알 수 있습니다.

위의 논의를 바탕으로 yolov2 웹사이트에서 최신 cfg 및 바이너리 파일을 다운로드했습니다. 그러나 여전히 작동하지 않으며 이제 이유를 알 수 있습니다. 나중에 성공적인 이야기를 쓸 수 있기를 바랍니다.

@chadrick-kwag 안녕하세요, 해결하셨나요?

@AlexeyAB 불행히도 아니요. 결함 없이 작동하는 small-yolo-voc로 전환해야 했습니다. 내 프로젝트는 간단하므로 small-yolo도 저에게 적합합니다. 안 좋은 소식을 전해드려 죄송합니다 :(

@chadrick-kwag 네 감사합니다. https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU 또는 https://pjreddie.com/darknet/yolo/ 에서 tiny-yolo-voc를 사용합니까?

@AlexeyAB 나는 pjreddie의 것을 사용했습니다. 참고로 저는 약 6개월 전에 다운로드한 것을 사용하고 있습니다. 여전히 작동하기를 바랍니다.

위 구글 드라이브 링크에서 웨이트 파일(yolo.weights)에 해당하는 cfg 파일 직접 다운로드 링크 있으신 분 계신가요?

@shailensobhee 나는 darkflow와 darknet repo 사이에서 yolov2-voc cfg와 weight 파일의 가능한 모든 조합을 시도했습니다. 한 경기가 없는 것 같습니다.

@thtrieu @AlexeyAB 어떤 생각이 있습니까?

darkflow 디렉토리의 loader.py에서 오프셋을 변경하여 이 문제를 해결할 수 있습니다.
오프셋을 16으로 낮추고 다시 테스트하는 것이 좋습니다.
지엘

운전하다

링크 받으셨나요? 그렇지 않은 경우 여기에 내가 사용한 것이 있습니다. https://drive.google.com/drive/folders/0B1tW_VtY7onidEwyQ2FtQVplWEU