반응형 전체 글1611 크롤링 핵심 가이드 (Java, Jsoup) 도서 후기 크롤링 핵심 가이드 (Java, Jsoup) 올해 들어 처음 완주한 도서, 크롤링 핵심가이드라는 책이다. 위키북스에서 출간했고 일본 개발자들이 쓴 책이며, 윤인성 님이 옮긴 도서인데 시시콜콜한 이야기에서부터 알아두면 좋은 팁들과 java + jsoup을 활용한 크롤링, 스크래핑 팁들이 수록되어 있다. 회상에서 크롤링 하는 프로젝트를 작게 시작했고 크롤링된 데이터를 스크래핑해서 서비스하는 모델이 있어 어설프지만 책을 통해 학습을 하면서 하나씩 해결해나가고 있다. 책은 전반적인 크롤링에 대한 이야기와 크롤링에 대한 예의, 다양한 데이터 형식을 처리하는 방법등을 소개한다. 또 크롤링하면서 유용하게 사용할 수 있는 툴들과 사이트도 소개하고 있다. 크롤러를 지탱하는 기술을 시작으로 HTTP에 대한 이해, 문자깨짐.. 2019. 1. 4. 2019년 기해년 (己亥年) - 황금 돼지해의 의미 2019년 기해년 (己亥年) - 황금 돼지해의 의미 모처럼 타자 연습도 할 겸, 신문 기사에 올해 기해년에 대해 이야기가 실린 부분이 있어 옮겨 본다. 올해는 황금돼지의 해라고 하니 다들 재운과 행운이 따르는 한해가 되길 바라며... 돼지해의 의미 돼지해((己亥年) 새해가 밝았다. 우리나라에서는 예부터 집집마다 돼지를 길렀고 어쩌다 돼지꿈을 꾸면 재수 좋은 꿈을 꿨다고 기뻐했다. 장상하는 사람들은 돼지가 새끼들에게 젖을 빨리는 사진을 걸어놓고 장사가 잘되기를 빌기도 했다. 죽어서도 돼지혈에 묘를 쓰면 부자가 된다고 믿어왔다. 이처럼 우리 민족은 예부터 돼지를 부와 복의 상징으로 돼지꿈을 재운과 행운의 상징으로 여겨왔다. 많은 사람들이 돼지 해를 맞으면서 행운과 재물운이 따를 것으로 믿는 것도 이 때문이다.. 2019. 1. 3. 이케아(IKEA) 고양점, 평일 나들이 이케아(IKEA) 고양점, 평일 나들이 결혼기념일 이런 저런 일이 있어 뭘할까 고민하던차에 이케아가 고양점에도 생겼다고 해서 내비를 찍어보니 40분 밖에 걸리지 않는다. 간단하게 점심을 먹고 아내와 둘이서 이케아로 향했다. 뭘 살게 있는건 아니지만 방마다 작은 책장서랍 같은 것들이 있나 싶어 둘러보기로 했는데 정작 엉뚱한 제품만 사왔다. 고양점도 광명적과 마찬가지로 스케일에서 어마어마한 크기를 자랑했으며 쇼룸과 식당, 계산대 앞의 대형 상품관들은 촌스러움을 자아내게 하는 포스를 가지고 있었다. 여유롭고 한가롭게 둘러보자며 차근차근 부스를 돌아보며 호감가는 디스플레이나 제품들이 있으면 유심히 살펴보기도 하고 사진도 찍어보기도 했지만 마땅히 우리집과 어울릴만한 제품을 찾기는 쉽지 않았다. 예쁜 카페나 넓은 .. 2019. 1. 3. HTML에서 데이터 추출 크롤링 핵심 가이드라는 책을 읽으면서 크롤링된 데이터에서 필요한 정보를 추출하는 '스크레이핑'에 대해 추출 방법을 정리해 본다. 정규표현식 html내부의 모든 a태그를 추출 하는 표현식 .*? 자바의 java.util.regex.Pattern클래스로 정규 표현식을 사용할 수 있다. String html = .... //a 태그를 추출하기 위한 정규 표현 Pattern regex = Patten.compile(".*?"); //Matcher 객체 생성 Matcher matcher = regex.matcher(html); //정규표현식에 일치하는 부분은 콘솔에 출력 while(matcher.find()) { System.out.println(matcher.group()); } XPath XPath는 XML의.. 2019. 1. 2. 수유 추어탕 맛집 <미락원> 새롭게 변했다. 수유 추어탕 맛집 새롭게 변했다. 의미를 두자면 2019년 1월 1일 첫 포스팅이다. 새해 첫날이고 많은 의미가 있을 수 있는 날이지만 그 의미를 거두면 화요일이다. 내일이면 출근을 해야하고 당분간 이런 연휴가 없을 것이고 (설날을 고대하며..) 망.했.다. 광산사거리에서 4.19국립묘지 방향으로 접어 들면 기사식당과 맛집 거리가 나오는 곳에 오래된 느낌의 미락원 추어탕집이 있다. 꽤 오랜동안 영업을 하는 곳이고 자주는 아니지만 가끔 들러 점심을 먹고 오는 곳이다. 2017/06/22 - [맛있는 이야기] - 미락원 추어탕, 가끔 찾는 그 곳 2016년 6월에 갔단 곳이 포스팅에 있어 이전글 넣기로 추가해 두었다. 예전에 비해 식당안은 테이블로 다 바뀐 상태였고 메뉴도 좀 새로워진 느낌이다. 특히 추어탕.. 2019. 1. 1. 을지로 맛집 진가와, 페럼타워 세번째 회식 을지로 맛집 진가와, 페럼타워 세번째 회식 빗방울이 떨어지는 늦은 가을날 밤. 세번째 회식 장소는 을지로 페럼타워에 있는 진가와라는 360년을 이어온 일본 장인의 맛이라고 한다. 내심 기대를 가지고 즐거운 마음으로 퇴근을하고 을지로로 이동하면서 오랫만에 동료들과 많은 이야기를 했던 날이기도 하다. 가을비가 내렸던 날이라 분위기 만큼은 최고였다. 메인 코스 요리였던 스키야끼. 그런데 심야식당에서 봤던 그런 스키야끼는 아니라 다소 실망을 했던 날. ㅎㅎ 하지만 밀폐유도 아닌 스키야끼도 아닌 이 음식은 코스음식으로 나오는 마지막 음식인데 이미 술이 취해 뭔지 잘 모를 정도였다. 조금 아쉬웠던 첫 스키야끼. 하지만 개인적으로 오기에는 참, 부담스러운 집이라 좋았던 진가와. 의지와 상관없이 정해진 코스 음식, 나.. 2018. 12. 31. 이전 1 ··· 138 139 140 141 142 143 144 ··· 269 다음 반응형