'web'에 해당되는 글 4건

  1. 2016.12.19 [웹 크롤러] crawler4j 링크
  2. 2008.09.19 [세미나]웹 애플리케이션 컨퍼런스 2008
  3. 2007.05.21 Web 행사 안내
  4. 2007.05.10 IT Keywords..

[웹 크롤러] crawler4j 링크

ITWeb/개발일반 2016.12.19 13:17

웹 크롤러가 많이 있습니다.

그 중에서 그냥 java 로 쉽게 구현 할 수 있는 crawler4j 링크 공유해 봅니다.


https://github.com/yasserg/crawler4j


샘플 코드는 그냥 위 링크에 올라와 있는 코드 그대로 테스트 해보시면 동작 잘 합니다.

robots.txt 에러가 발생 하는 부분이 있을 경우 아래 설정 추가해 주시면 됩니다.


RobotstxtConfig robotstxtConfig = new RobotstxtConfig();
robotstxtConfig.setEnabled(false);


다른 크롤러가 궁금하신 분들은 아래 구글링 링크 참고하세요.

https://www.google.co.kr/webhp?sourceid=chrome-instant&ion=1&espv=2&ie=UTF-8#newwindow=1&q=web+crawler+open+source


저작자 표시 비영리 변경 금지
신고
Trackback 0 : Comment 0

[세미나]웹 애플리케이션 컨퍼런스 2008

ITWeb/스크랩 2008.09.19 10:10



홈페이지 : http://webappscon.com/2008/

웹 애플리케이션 컨퍼런스 2008

한국 웹 기술 업계 종사자들의 축제 한마당인 웹앱스콘 2008 행사를 개최합니다. 여러분의 많은 참여 바랍니다. .

행사 안내

  • 일시: 2008년 10월 23일(목) 오전 9시~ 오후 6시
  • 장소: 신도림동 테크노마트 11층 그랜드 볼륨
  • 주최: 미래웹포럼, 한국 웹표준 커뮤니티, 웹 2.0 워킹 그룹
  • 주관: 전자신문사
  • 후원: (주)다음커뮤니케이션, NHN(주), 한국 마이크로소프트, 구글 코리아, 야후!코리아
  • 미디어 협찬: 전자신문사, ZD 넷 코리아

등록 안내

  • 참가비: 20,000원 (지방 참가자 무료)
  • 참가 등록은 10월 6일(월) 부터 시작 합니다.

참여 이벤트

우리는 여러분의 참여로 이 컨퍼런스가 만들어지기를 바라고 있습니다. 론치패드, 공개 세션, 프로그램 위원회, 자원 봉사단 등에서 본 컨퍼런스에 발표하실 분이나 참여하실 분을 모집합니다. 여러분의 적극적인 관심 부탁 드립니다.


골드 스폰서에는 국내 기업들이...
실버 스폰서에는 글로벌 기업들이...

이것도 재밌군요..

작년에 저도 좀 준비를 해서 참가 하고 싶었었는데.. 음냐..
올해도 아주 재밌는 행사가 될거라 생각해 보면서.. 멋진 정보 공유의 장이 되었으면 합니다.

이전글 : http://jjeong.tistory.com/41


프로그램 소개

국내 웹 기술 분야 전문가들이 프로그램 위원회를 구성하여 알찬 웹앱스콘 2008 프로그램을 만들고 있습니다. 아래 프로그램 내역을 보시고 발표를 원하시는 분들은 발표 참가 신청을 해주시기 바랍니다.

프로그램

09:00~09:30 오 전 등 록

오전 튜토리얼 (09:30—12:30)

오전 튜토리얼은 Front-end 분야와 Back-end 분야로 크게 나누어 각 영역별 전문가들이 해당 기술에 대해 실무적인 개발 시연 및 문제 해결 중심으로 진행 됩니다..

세션 I Front-end 기술 (대공연장)

  • 리치 웹 기술
  • 웹 표준 기술
  • 모바일 UI 기술
  • 오픈 API 기술

세션 II Back-end 기술 (그랜드 볼륨)

  • 웹 프로그래밍
  • 웹 개발 프레임웍
  • 분산 컴퓨팅
  • 시맨틱 웹

12:00~13:00 오후 등록

컨퍼런스 (13:00—18:00)

오후 컨퍼런스는 주요 기술 이슈에 대한 해외 강사들의 심도 있는 전략과 시연, 국내 전문가들의 패널 토의, 신규 서비스 데모 등으로 진행 됩니다.

키노트(Keynote)

향후 웹 기술 방향에 대한 국내외 주요 기술 리더들의 생각을 들으실 수 있습니다.

패널 토의(Panel)

주요 이슈에 대한 국내외 주요 기술 리더들의 패널 토의를 들으실 수 있습니다.

라이트닝 토크(Lighting Talk)

Lighting Talk는 국내외 각종 웹 서비스 및 기술 관련 이슈에 대해 잘 알고 있는 전문가가 각 이슈에 대해 현재 진행 사항과 향후 전망을 릴레이 토크 방식으로 진행하는 세션입니다. 소셜 네트웍, 오픈소셜, 오픈웹, 웹 기반 지도, 텍스트큐브 등 국내 웹 현안에 대해 발제 합니다.

론치패드(Launch Pad)

Launch Pad란 신규 서비스를 개발하는 벤처 기업이 자사의 솔루션 및 서비스를 소개하는 시간입니다. 웹 기반 서비스 및 소프트웨어를 개발하는 업체인 경우 신청을 하시면 프로그램 위원회의 심사를 거쳐 5개 기업에 대해 10분간 자사 솔루션과 서비스 시연을 할 수 있는 기회를 드립니다.

공개 세션(Open Session)

오픈 세션은 참가자들이 직접 발표자가 되는 언컨퍼런스(Unconference) 형식을 통해 직접 프로그램을 구성하고 즉석에서 발표를 진행합니다. 행사장 로비에서 스폰서 업체들의 주제별 부스에서 20~30명의 관심자들에게 자신의 이야기를 하실 수 있습니다.

싸인 부스(Sign Booth)

컨퍼런스 주요 강사 및 유명 블로거들의 싸인 및 기념 촬영을 하실 수 있는 부스를 운영 합니다.


 

저작자 표시 비영리 동일 조건 변경 허락
신고
Trackback 0 : Comment 0

Web 행사 안내

ITWeb/스크랩 2007.05.21 12:28
좀 늦은 감이 없지 않아 있지만..
channy's blog 에 들어가 보시면 이미 8일에 올라온 것들인데.. 저는 메일로 접하고 나서 이제야 정보를 공유 하내요..

channy's blog : http://channy.creation.net/blog/?p=414
zdnet : http://www.zdnet.co.kr/news/spotnews/internet/etc/0,39040060,39157414,00.htm (web 2.0 서비스 쇼케이스)

저는 개인적으로 barcamp seoul 두번째 행사랑 KIISS 춘계 학술 대회에 관심이 가내요.
ref. http://barcamp.org/BarCampSeoul2
이번 주제는 "정보 사회와 기술의 만남" 입니다.

ref. http://acoms1.kisti.re.kr/kiiss/conference/index.jsp?lang=kor&publisher_cd=kiiss&cid=KIISS_C2007A
ref. http://www.kiiss.or.kr/
이번 주제는 "UCC(User Created Content)와 집단 지성(Collective Intelligence)" 입니다.

이런 좋은 행사에 많이들 참여 하셔서 활발한 정보의 순환이 일어 났으면 좋겠습니다.
신고
tags : IT 행사, web,
Trackback 0 : Comment 0

IT Keywords..

ITWeb/스크랩 2007.05.10 15:39
OpenID
Web2.0
Ajax
Framework
Social Network/Search
Javascript/DOM
Flex
Silverlight
OpenAPI
Mashup
Meta Blog
Blog Portal
Community
UCC
Collective Intelligence
Open Source

정말 많기도 하다..
요즘.. 사무실에서 일하면서 많이 듣거나 생각하게 하거나 하는 그런 것들 입니다.
내가 알아가는 시간이나 기간보다 IT(web) 은 너무도 짧은 시간에 많은걸 던져주고 있으니.. 실력이 부족한 저를 원망하게 되내요..
그래도.. 좋아 하는 분야이기에..ㅋ 근데 집사람이 많이 싫어 합니다..
야근이 많다고.. ^^;

그래도 뒤쳐지지 않을려면 열심히 트랜드도 읽고 분석하고 배우고 해야 하지 않겠습니까...
분명, 언젠가는 따라가는 사람이 아닌 이끄는 리더가 될 그날을 상상해 보며... ^^*

아싸.. 화이팅!!
신고

'ITWeb > 스크랩' 카테고리의 다른 글

Media Guru : User-generated content a big threat  (0) 2007.05.16
국내 최초의 "비지니스 블로그 서밋 2007" 행사  (0) 2007.05.16
IT Keywords..  (0) 2007.05.10
user needs?  (0) 2007.04.23
F-Shaped Pattern Form Reading Web Content  (0) 2007.04.23
[HTTP Method] post vs get  (0) 2007.04.18
tags : IT, web
Trackback 0 : Comment 0