from future import dream - Latest Comments

Re: KoNLP 0.7 업데이트

gogamza — Wed, 16 May 2012 07:57:21 -0000

네 감사합니다... 코드도 스펠 체킹이 필요하겠네요 ^^;

나의 iPad에서 보냄

2012. 5. 16. 오후 7:58 "Disqus" <notifications@disqus.net> 작성:</notifications@disqus.net>

Re: KoNLP 0.7 업데이트

Jong Yong Park — Wed, 16 May 2012 06:42:24 -0000

오류 제보 합니다. 타이포가 있는것 같습니다. ^^:> backupUsrDic(ask=FALSE)
finidhed backup!

Re: 내 트위터 팔로워분들 분석해보기..

ojonghwa — Tue, 15 May 2012 11:14:32 -0000

이전 문제가 발생된 컴퓨터는 메모리 1.8G였고, 메모리3G 설치된 다른 컴퓨터에서는 오류없이 예제 잘 작동하고 있습니다.
그리고 굳이 저용량 메모리에서도 가동되도록 하는데 시간을 투자하시기 보다는 NLP의 한글처리 부분에 시간 투자를 더 하시는게 좋으실 듯 하네요. 잘 사용하도록 하겠습니다. ^^

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Tue, 15 May 2012 06:33:38 -0000

이 문제는 제가 알고있는 문제입니다.혹시 컴퓨터 메모리가 2G 미만이신지요.?

아마도 그럴거 같구요. 사전용량 때문에 자바 vm 메모리를 많이 확보하게 되는데 확보를 하지못해서 나는 에러입니다.

일단 해결 방법은 제가 알고 있으나 적용해야되나 마나 고민입니다. 왜냐면 사전 용량을 줄여야하기 때문입니다.

일단 바로 해결을 하시려면 메모리를 늘리는 방법이 가장 빠르구요. 저는 어떻게 해야될지 고민을 해봐야겠습니다.

나의 iPad에서 보냄

2012. 5. 15. 오후 6:11 "Disqus" <notifications@disqus.net> 작성:</notifications@disqus.net>

Re: 내 트위터 팔로워분들 분석해보기..

ojonghwa — Tue, 15 May 2012 05:11:32 -0000

좋은 글들 감사드립니다. R을 사용한 데이터분석을 공부하면 KoNLP를 알게되어 KoNLP를 설치하고 제공하신 예제들을 돌려 보고 싶은데 오류가 발생해 도움을 요청드립니다.

윈도우Xp, Java 1.7, R 2.14를 설치했고 rJava, bitops, testthat 설치했습니다.

------- 오류 ------------

> library(KoNLP)
Loading required package: rJava
Loading required package: bitops
Error : .onLoad failed in loadNamespace() for 'KoNLP', details:
call: .jinit(parameters = c("-Dfile.encoding=UTF-8", "-Xmx1024m"))
error: Cannot create Java virtual machine (-4)
Error: package/namespace load failed for ‘KoNLP’

> extractNoun("롯데마트가 판매하고 있는 흑마늘 양념 치킨이 논란이 되고 있다.")
Error: could not find function "extractNoun"

혹시 무슨 이유때문인지 알 수 있을지요 ..

줄바꿈이 적용되지않아 아래글을 삭제하고픈데 지우지 못해 이렇게 다시 올렸습니다.

Re: 내 트위터 팔로워분들 분석해보기..

오종화 — Tue, 15 May 2012 05:01:04 -0000

안녕하세요. 좋은 글들 감사드립니다. R을 사용한 데이터분석을 이제 공부하면서 KoNLP를 알게되어 윈도우에 설치를 했는데 아래와 같은 오류가 발생했습니다.
사용환경 윈도우Xp, Java 1.7, R 2.14, rjava, bitops, testthat 설치했습니다.
----------------------
> library(KoNLP)Loading required package: rJavaLoading required package: bitopsError : .onLoad failed in loadNamespace() for 'KoNLP', details: call: .jinit(parameters = c("-Dfile.encoding=UTF-8", "-Xmx1024m")) error: Cannot create Java virtual machine (-4)Error: package/namespace load failed for ‘KoNLP’

> extractNoun("롯데마트가 판매하고 있는 흑마늘 양념 치킨이")Error: could not find function "extractNoun"

--------------------
혹시 무슨 문제인지? 질문드려도 될런지요..

Re: 내 트위터 팔로워분들 분석해보기..

Jong Yong Park — Mon, 14 May 2012 03:18:24 -0000

'RHive의 장점은 R에서 만들어진 모델은 어떤 것이든 대용량 데이터에 피팅 가능하다는 장점이 있습니다'. 이 마지막 문장에서 질문했던 사항을 조금은 이해한것 같습니다. pmml은 생성하는 쪽이나 받아들이는 쪽에 제약이 있는 것으로 알고 있어서요 ^^: RHIVE 말씀대로면 무지 좋은 환경인데요 ^^: 윈도우즈에서 사용할수 있다면 얼마나 좋을까요 ^^:(cygwin으로 하둡설치하고 RHIVE가 되는지 알아봐야 겠습니다. ^^:)

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Sun, 13 May 2012 23:39:07 -0000

그때 뭐라고 말씀 드렸는지 생각은 나지 않지만 지금 생각은 이렇습니다.

학습이 아닌 만들어진 모델을 가지고 대용량 데이터에 피팅하는건 단순한 분산 처리만으로도 충분히 커버 가능합니다.

이게 PMML이 적용 가능하다면 Hadoop map/reduce 코드로 PMML을 로딩하게끔 해서 분산 처리 가능하구요. 그게 아니더라도 트리계열의 알고리즘의 경우 분산 DB에서 간단히 적용 가능하죠.

물론 복잡한 블랙박스 계열의 알고리즘의 경우 포팅이 힘들어질 수 있으니 염두에 둘 필요 있습니다.

RHive의 장점은 R에서 만들어진 모델은 어떤 것이든 대용량 데이터에 피팅 가능하다는 장점이 있습니다.

Re: 빅 데이터… 웹 2.0…. 그리고 검색

gogamza — Sun, 13 May 2012 23:34:23 -0000

검색 하던 사람에게는 딱히 새로운 분야는 아닌듯 해서요....ㅋ 단 엔지니어 측면에서 말이죠..

Re: 빅 데이터… 웹 2.0…. 그리고 검색

Jinyoung Kim — Sat, 12 May 2012 12:21:24 -0000

검색은 Commercial Application이 뚜렸한 분야라 일찍부터 Big Data 기술 개발의 장이 되었던 것 같습니다. 하지만 말씀하신대로 통계/ML 및 대용량 데이터 처리 기술의 응용법은 무한하겠죠 ^^

Re: 내 트위터 팔로워분들 분석해보기..

Jong Yong Park — Thu, 10 May 2012 05:55:49 -0000

생각난김에 하나만 더 여쭈어 보고 싶습니다. 고감자님 예전 강연자료를 보면 R에서 만든 데이터 마이닝 모델을 대용량 데이터에 피팅하려면 PMML? 요런 부분이 있는데요

이내용이 The Marriage of Hadoop and R 슬라이쯤에 나오는 내용이라 부정적인의미로 쓰신건지 그렇게 하면 된다 라는 의미로 쓰신건지
저는 환경상 하둡쪽하고는 거리가 먼 상황이라 R에서 생성한 PMML을 PMML로 스코어값을 생성할 수 있는 시스템으로 옮길때 문제가 있다는 의미를 쓰신건지 아니면 그런 작업이 번거롭다라는 의미로 쓰신건지가 궁금해서 생각난김에 여쭈어봅니다. 강의를 듣지 못해서그런지 갑갑해서요 ^^:

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Thu, 10 May 2012 05:37:22 -0000

덕분에 일반적인 해결책이라는게 어느정도 증명된거 같네요.

오늘 집에 가서 관련 포스팅이나 써야겠습니다. ㅎㅎ

감사합니다.

2012/5/10 Disqus <notifications@disqus.net></notifications@disqus.net>

Re: 내 트위터 팔로워분들 분석해보기..

Jong Yong Park — Thu, 10 May 2012 05:23:40 -0000

감사합니다. 잘 작동합니다. ^^
stackoverflow에도 없던 해결책을
고감자님이 제시해주시네요~ ^^

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Thu, 10 May 2012 05:16:27 -0000

저도 데이터 누락이 있나 찾아봤는데, 데이터 누락은 없는거 같았습니다.

하지만 확인해 보세요.

작동 한다니 다행이네요... ^^

2012/5/10 Disqus <notifications@disqus.net></notifications@disqus.net>

Re: 내 트위터 팔로워분들 분석해보기..

Jong Yong Park — Thu, 10 May 2012 05:08:52 -0000

와우 감사합니다.

그런데
Warning message:
In RCurlIconv(str, from = "C99", to = encoding) :
UTF-8 not supported iconv entries이런 Warning은 걍 무시해도 되는거겠죠 ^^:

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Thu, 10 May 2012 04:26:40 -0000

찾아보니 RCurl에 옵션으로 있기는 하네요.

하긴 twitteR이 RCurl을 사용하니..그렇죠..

2012년 5월 10일 오후 4:52, 전희원 <madjakarta@gmail.com>님의 말:</madjakarta@gmail.com>

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Thu, 10 May 2012 03:53:04 -0000

아직 ROAuth에 버그가 있는듯 합니다.

help파일에는 없구요. 제가 소스코드 훓어보고 찾아낸 꼼수인데... 그쪽에서도 적용이 될지는 모르겠습니다.

건승을 빕니다.

참.. 그리고 성공적으로 사용이 되긴 하는데, 다수의 Warnings이 나더군요. 그래도 데이터 누락은 없는듯 하니 일단 사용하시면 될듯 합니다.

2012/5/10 Disqus <notifications@disqus.net></notifications@disqus.net>

Re: 내 트위터 팔로워분들 분석해보기..

Jong Yong Park — Thu, 10 May 2012 03:48:55 -0000

헉 그런 방법이 help 매뉴얼 어디를 봐야 하는지도 알려주세요 ㅎㅎㅎㅎ

아닙니다. 미트업후 공개하실때까지 일단 삽질해보겠습니다. ^^:

Re: 내 트위터 팔로워분들 분석해보기..

gogamza — Thu, 10 May 2012 03:30:41 -0000

ㅋㅋㅋㅋ 댓글을 보면서 미소가나네요...

지금 아이패드로 적는거라 자세하게 적지는 못하겠구요.

꼼수가 있는데..perm파일을 매 api 사용시마다 인자로 건내면 되실겁니다...

건투를 빕니다..

Re: 내 트위터 팔로워분들 분석해보기..

Jong Yong Park — Thu, 10 May 2012 03:15:47 -0000

재미있는 분석을 준비하시고 계시군요~ ^^. 저도 ROAuth 인증받아서 윈도우머신하에서 트위터 데이터를 분석할까 했는데 -.-;; ROauth 0.9.2버전인스톨하고 registerTwitterOAuth(cred)[1] TRUE

요단계까지는 진행했는데,그 뒤
publicTweets <- publicTimeline()를 누르는 순간 오류가 납니다. -.-;;

오류function (type, msg, asError = TRUE) : SSL certificate problem, verify that the CA cert is OK. Details:error:14090086:SSL routines:SSL3_GET_SERVER_CERTIFICATE:certificate verify failed
혹시 무슨 마법의 방법이 숨어 있을까요~ 고감자님

Re: 블로그 구독자 증가 추이

gogamza — Tue, 08 May 2012 20:32:08 -0000

저는 HP 필터 적용해보고 싶었습니다만. ㅋ

Re: 텍스트 마이닝을 통한 SNA

gogamza — Tue, 08 May 2012 20:31:10 -0000

말씀 드렸던 것처럼 파일은 배포하지 않습니다. 아무 텍스트나 가능하니 그것을 활용하시는게 좋습니다.

Re: 텍스트 마이닝을 통한 SNA

MJCHO — Mon, 07 May 2012 06:04:20 -0000

이거 예제 파일 받을 수 없나요?

Re: 블로그 구독자 증가 추이

재연 — Sun, 22 Apr 2012 16:41:09 -0000

그래프를 보니 저번 학기에 배웠던 ARMA 모형을 써보고 싶다는 생각이 들었습니다 ㅋ

Re: 컴퓨터 공학 그리고 통계

gogamza — Wed, 18 Apr 2012 07:21:05 -0000

네 맞습니다. 좋은 플랫폼을 잘 사용해서 분석하는 능력도 중요하더군요.

from __future__ import dream - Latest Comments

Re: KoNLP 0.7 업데이트

Re: KoNLP 0.7 업데이트

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 빅 데이터… 웹 2.0…. 그리고 검색

Re: 빅 데이터… 웹 2.0…. 그리고 검색

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 내 트위터 팔로워분들 분석해보기..

Re: 블로그 구독자 증가 추이

Re: 텍스트 마이닝을 통한 SNA

Re: 텍스트 마이닝을 통한 SNA

Re: 블로그 구독자 증가 추이

Re: 컴퓨터 공학 그리고 통계

from future import dream - Latest Comments