디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

저거 8.46 아이피 저거 보니까 어려울건 없는듯

ㅆㅇㅆ(124.216) 2025.10.14 10:32:19
조회 101 추천 0 댓글 4

이거 전부 보니까 800만개 URL 수집하고, GLOBUS랑 데이터 다운하고 JSON 구조랑 해야하는데 데이터 구조만 알면 딱히 어려운건 없는듯?


보니까 파이썬 스크립트 사용법까지 제공됨


환경 설정(Globus 계정) 데이터셋 다운 파이썬 설정 -30분


스크립트 실행 하고, 데이터셋 7GB 전체 추출하면 경험상 2시간 정도?


코드북 제작 검토하면 얼추 3시간


이렇게 문서화까지 경하면 6~7시간 세트 정도?


디버깅 고려해서 공임 치면 8시간 걸릴듯. 숙련된 개발자 기준이면 3시간 미만도 가능할거고


방법론 자체는 news_extractor.py를 실행해서 csv 변환하는거 밖에 없음


문제는 데이터셋 다운인데, 원격으로 너한테 다운받게 한후에 일부 데이터 나한테 보내서 그 데이터 바탕으로 코드북 작성하면되서 어려울게 없음


원격 조작은 한 3시간 정도 하면될거고


근데 저걸 코드북이랑 CSV 테이블 문서화가 좀 걸리지


기본적으로 프로그래머 공임이 주니어 기준 25000인데, 나는 좀 싸게 18000정도로 받으니까


내 기준이면 단가 12만인데 나한테 맡기면 10만에 해줌 ㅇㅇ


추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 영포티룩도 멋지게 소화할 것 같은 40대 스타는? 운영자 25/10/27 - -
AD 할로윈 슈퍼위크~!! 운영자 25/10/23 - -
2897010 숨고 홈페이지 유지보수 요청이 왔는데 [1] 프갤러(175.116) 10.17 114 0
2897004 나도 변호사 랜딩 60만이었는데 요즘은 랜딩페이지 대강 20이상 [4] ㅆㅇㅆ(124.216) 10.17 138 0
2897003 위시캣 기술스택 이렇게 적었는데 빠꾸먹는데 [2] ㅇㅇ(106.101) 10.17 107 1
2897002 마케팅이나 기획에 가까운게 통계학임 미디어과임? [4] 프갤러(121.175) 10.17 83 0
2897001 플랫폼에서 서비스 판매를 하고 싶으면 [6] 에이도비갤로그로 이동합니다. 10.17 115 1
2896999 겨울 동안 10키로 빼야징 ♥덩냥이♥갤로그로 이동합니다. 10.17 101 0
2896997 외주 구하려는데 안구해짐 [12] ㅇㅇ(106.101) 10.17 181 1
2896996 통계학과 나오면 기획 쪽 할수있지? [1] 프갤러(121.175) 10.17 95 0
2896995 고가 도서 [2] 발명도둑잡기(118.216) 10.17 128 1
2896994 이민정 인스타 해물파전 레전드 [4] 발명도둑잡기(118.216) 10.17 159 0
2896993 왤케 냥덩이를 못살게 구는지.. [5] ♥덩냥이♥갤로그로 이동합니다. 10.17 134 0
2896992 프갤에서 FP 니 뭐니하는 애들보면 다 탁상공론이었잖아 [8] ㅆㅇㅆ(124.216) 10.17 195 1
2896991 엄마가 만들어둔 주택청약이랑 주식계좌 있던데 그거 쓰면 엄마한테 알림가? ㅇㅇ(223.39) 10.17 67 1
2896989 문화에 힘을 왜 쓰냐 다 구란데 [1] 프갤러(211.210) 10.17 103 0
2896988 한강찬가 [1] 발명도둑잡기(118.216) 10.17 76 0
2896987 점심 간식 저녁 간식 발명도둑잡기(118.216) 10.17 73 0
2896986 내가 느끼는건 창조의 임계영역까지 갈 사람이 없는거 같음. [4] ㅆㅇㅆ(124.216) 10.17 114 0
2896984 나님 슬슬 소화되는듯? [1] ♥덩냥이♥갤로그로 이동합니다. 10.17 100 0
2896983 재능이 중요한가? 각양각색 사람 다 만나봤는데 [5] ㅆㅇㅆ(124.216) 10.17 141 0
2896982 슬덩슬덩 [1] ♥덩냥이♥갤로그로 이동합니다. 10.17 65 0
2896981 긴급] 나님 내일 한강 뛰뛰 긴급 취소! 신변위협 느껴 충격 [5] ♥덩냥이♥갤로그로 이동합니다. 10.17 125 0
2896980 멀리 사는 친구랑 술 한잔 먹고싶으면 너넨 무슨 생각함?? [2] ㅇㅇ(223.39) 10.17 73 0
2896979 문득 구현하다가 느낀건데 너네 자기가 한 구현 생각나냐 [7] ㅆㅇㅆ(124.216) 10.17 122 1
2896977 나는 중학교때 아이큐로 자위하고 있어! ㅇㅇ(211.234) 10.17 65 1
2896975 프밍 재능 없는 애들 특징이 뭐임? [12] 루도그담당(58.239) 10.17 151 0
2896974 모기 물린곳 며칠째 계속 가렵다 ♥덩냥이♥갤로그로 이동합니다. 10.17 88 0
2896973 제조업에서 풀스택하는데 [4] 프갤러(211.234) 10.17 129 1
2896972 소화되면 바루 자야지 [2] ♥덩냥이♥갤로그로 이동합니다. 10.17 73 0
2896971 나님 낼 한강 출격!! [4] ♥덩냥이♥갤로그로 이동합니다. 10.17 114 0
2896970 ㅇㅅㅇ❤+ ♥덩냥이♥갤로그로 이동합니다. 10.17 56 0
2896969 통계학과에서 영상제작은 안배우지? [2] 프갤러(211.235) 10.17 69 0
2896966 근데 만들라고 만들면 개발자임? [7] 프갤러(218.50) 10.17 126 0
2896965 테크 유튜브 볼 이유가 없는게 너무 현실적으로 동떨어져 있지 않냐 [1] ㅆㅇㅆ(124.216) 10.17 119 0
2896964 31살인데 프로그래밍 공부하는거 어케생각함? [5] ㅇㅇ(118.235) 10.17 125 1
2896962 1년 해보니까 전산직 마렵긴함 ㅇㅇ(223.39) 10.17 116 1
2896960 애널 빡세개 굴럿더니 ㄹㅇ 개피궁 암것두 못하갯당 ♥덩냥이♥갤로그로 이동합니다. 10.17 81 0
2896959 모리아 게임 발명도둑잡기(118.216) 10.17 47 0
2896957 프로젝트로 어플4개랑 유지보수하나하니까 죽을맛인데 [10] ㅇㅇ(223.39) 10.17 119 0
2896956 [고민] 스타트업에서 일하는 사람있음? [9] 프갤러(218.50) 10.17 584 0
2896949 근데 취직도 돈이 있고 없고 판가름 나지 않냐. 내가 느끼는게 ㅆㅇㅆ(124.216) 10.17 68 0
2896945 이제 재명이가 세금 30%는 디폴트로 찢어갈듯 ㄷㅅㄷ [3] ♥덩냥이♥갤로그로 이동합니다. 10.17 79 0
2896944 안드로이드 개발환경도 도커쓰나?? [14] 프갤러(211.234) 10.17 99 1
2896943 이재명 이제 죽음세 까지 내라고하네 ㄷㅅㄷ ♥덩냥이♥갤로그로 이동합니다. 10.17 82 1
2896942 이거 구글이 혐한한거냐, 컴퓨터 오류인거냐 [2] 라그네파갤로그로 이동합니다. 10.17 64 0
2896941 김현지 녹취록 충격적이네.. 이재명 재판개입까지 했다는건가..? ♥덩냥이♥갤로그로 이동합니다. 10.17 88 2
2896940 강북구에서 얼마전 열린음악회 이어 전국노래자랑 발명도둑잡기(118.216) 10.17 90 0
2896938 학생 코드 가르치면서 느끼는데 학생이 DI를 어려워하네 [5] ㅆㅇㅆ(124.216) 10.17 132 0
2896937 똑똑한척하기 너무 힘들다... [1] 프갤러(39.7) 10.17 93 0
2896936 코틀린 개발자 전망 알려주세요 [1] 의식의문갤로그로 이동합니다. 10.17 61 0
2896935 야구 우취됫노 ♥덩냥이♥갤로그로 이동합니다. 10.17 50 0
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

디시미디어

디시이슈

1/2