2007/05/06 23:38
제목은 거창한데 사실은 별건 아닙니다.
블로그 구독을 열심히하다보니 어느덧 500여개가 넘는 블로그를 보고 있습니다. 시간으로 따지면 하루 한시간 이상 꾸준히 투자하고 있는 셈입니다.
좀 더 생산적으로 이 시간을 활용하고자 꼼꼼히 중요한 글 체크를 해서 다시 보고 있는데 얼마전부터 1,000개 제한에 걸려 새로운 중요한 글 체크를 위해 예전 중요한 글을 지워야하는 아픔을...
시스템 부하때문에 1,000개 이상은 힘들다는 답변을 듣고, 매일매일 등록한 글을 내 블로그에 넣을 수 있으면 좋겠다는 생각을 하고 실천에 옮겼습니다.
난관 1. 공부 중인 ruby로 만들려고 했는데, 막막...
구글신과 프로그래밍 루비 에 의지해가며 하나씩 익혀가고 있습니다.
난관 2. HanRSS 중요한 글 가져오기 API 처리 - http://www.hanrss.com/api/get_starred_items.qst
- Http basic authentication
- RSS Parsing
- 잦은 테스트를 위해 파일로 저장하기
* http basic authenticatoin 뿐만 아니라 rss파싱까지 모두 ruby 표준라이브러리가 있어서 해결!
난관 3. 티스토리에 등록하기 (MetaWebLogAPI를 이용)
- MetaWebLogAPI 스펙 분석
- MetaWebLogAPI 함수
* 역시나 루비 표준라이브러리 안에 xmlrpc 가 있습니다.
* MetaWebLogAPI는 http://www.agileprogrammer.com/dotnetguy/articles/BlogImporterInRuby.aspx 에서 가져왔어용 :-)
- metaWeblog의 한계인지는 모르지만, category, author, link, pubDate 모두 무시됩니다.
난관 4. me2day처럼 매일매일 내가 중요한 글로 체크한 글들을 날짜단위로 포스팅 하기
- HanRSS에서는 pubDate에 원문날짜가 나오며 제가 중요한 글로 체크한 날짜 정보는 없습니다.
다행히 중요한 글 체크한 날짜가 최근글로 뿌려지고 있으니까 loop을 돌때 반대로 돌아야 최글글이 위에 나타 납니다.
대신에
난관 5. 제 블로그로 포스팅이 끝나면 HanRSS 중요한 글을 비워주기
- http://www.hanrss.com/api/get_starred_items.qst?empty=1
- 비워주면 끝인데? 테스트하기 두려움(?)
난관 6. 위의 과정을 통해 내 블로그에 엄청난 글들이 쌓이는데 이 과정에 대한 트랜잭션 개념을 도입하기
- client.newPost(blogpost,false) 함수의 리턴값으로 postid가 날라온다.
- 그렇지만 postid를 이용해 티스토리 블로그에서 글 지우기가 안되는듯
난관 7. 한꺼번에 많은 글이 포스팅되면 막혀버리는 문제
- HanRSS 중요한 글 보기 기준 중 25개 가 있으니 한번 호출에 100개씩만 이동 시키기
- 25개 이동이 끝나면 HanRSS에서 중요한 글 4페이지를 비워주자 (수동?)
현재까지 진행 상황은 여기까지이며, 이 삽질을 하느라 제 블로그에 엄청한 글들이 쌓였습니다.
문제는 그 사이 메타블로그에서 긁어가는 바람에 -.- 혹시 엄청난 펌 블로그로 오해하시는 분들이 계실까봐 걱정이네요.
암튼 그래서 만들어진 소스는...
블로그 구독을 열심히하다보니 어느덧 500여개가 넘는 블로그를 보고 있습니다. 시간으로 따지면 하루 한시간 이상 꾸준히 투자하고 있는 셈입니다.
좀 더 생산적으로 이 시간을 활용하고자 꼼꼼히 중요한 글 체크를 해서 다시 보고 있는데 얼마전부터 1,000개 제한에 걸려 새로운 중요한 글 체크를 위해 예전 중요한 글을 지워야하는 아픔을...
시스템 부하때문에 1,000개 이상은 힘들다는 답변을 듣고, 매일매일 등록한 글을 내 블로그에 넣을 수 있으면 좋겠다는 생각을 하고 실천에 옮겼습니다.
난관 1. 공부 중인 ruby로 만들려고 했는데, 막막...
구글신과 프로그래밍 루비 에 의지해가며 하나씩 익혀가고 있습니다.
난관 2. HanRSS 중요한 글 가져오기 API 처리 - http://www.hanrss.com/api/get_starred_items.qst
- Http basic authentication
- RSS Parsing
- 잦은 테스트를 위해 파일로 저장하기
require 'rss/2.0'
require 'open-uri'
open('http://www.hanrss.com/api/get_starred_items.qst',
:http_basic_authentication=>["twiny@naver.com", "여기에 비밀번호"]
) do |http|
response = http.read
result = RSS::Parser.parse(response, false)
puts "Channel : " + result.channel.title
result.items.each_with_index do |item, i|
puts item.title
puts item.description
end
end
require 'open-uri'
open('http://www.hanrss.com/api/get_starred_items.qst',
:http_basic_authentication=>["twiny@naver.com", "여기에 비밀번호"]
) do |http|
response = http.read
result = RSS::Parser.parse(response, false)
puts "Channel : " + result.channel.title
result.items.each_with_index do |item, i|
puts item.title
puts item.description
end
end
* http basic authenticatoin 뿐만 아니라 rss파싱까지 모두 ruby 표준라이브러리가 있어서 해결!
난관 3. 티스토리에 등록하기 (MetaWebLogAPI를 이용)
- MetaWebLogAPI 스펙 분석
- MetaWebLogAPI 함수
require 'xmlrpc/client'
client = MetaWebLogAPI::Client.new('twiny.tistory.com','/api','BlogID','twiny@naver.com','패스워드')
...
#아래 코드는 위 코드의 result.items.each_with_index do |item,i| 블럭 안에 적절히 삽입
blogpost = {
'title' => "#{item.title}" ,
'description' => "<a href='#{item.link}'>원문 링크 : #{item.author}</a><br /><br />#{item.description}",
'link' => item.link,
'category' => 'Shared RSS' ,
'pubDate' => item.pubDate
}
client.newPost(blogpost,false)
client = MetaWebLogAPI::Client.new('twiny.tistory.com','/api','BlogID','twiny@naver.com','패스워드')
...
#아래 코드는 위 코드의 result.items.each_with_index do |item,i| 블럭 안에 적절히 삽입
blogpost = {
'title' => "#{item.title}" ,
'description' => "<a href='#{item.link}'>원문 링크 : #{item.author}</a><br /><br />#{item.description}",
'link' => item.link,
'category' => 'Shared RSS' ,
'pubDate' => item.pubDate
}
client.newPost(blogpost,false)
* 역시나 루비 표준라이브러리 안에 xmlrpc 가 있습니다.
* MetaWebLogAPI는 http://www.agileprogrammer.com/dotnetguy/articles/BlogImporterInRuby.aspx 에서 가져왔어용 :-)
require 'xmlrpc/client'
module MetaWebLogAPI
class Client
def initialize(server, urlPath, blogid, username, password)
@client = XMLRPC::Client.new(server, urlPath)
@blogid = blogid
@username = username
@password = password
end
def newPost(content, publish)
@client.call('metaWeblog.newPost', @blogid, @username,
@password, content, publish)
end
def getPost(postid)
@client.call('metaWeblog.getPost', postid, @username,
@password)
end
def editPost(postid, content, publish)
@client.call('metaWeblog.editPost', postid, @username,
@password, content, publish)
end
end
end
module MetaWebLogAPI
class Client
def initialize(server, urlPath, blogid, username, password)
@client = XMLRPC::Client.new(server, urlPath)
@blogid = blogid
@username = username
@password = password
end
def newPost(content, publish)
@client.call('metaWeblog.newPost', @blogid, @username,
@password, content, publish)
end
def getPost(postid)
@client.call('metaWeblog.getPost', postid, @username,
@password)
end
def editPost(postid, content, publish)
@client.call('metaWeblog.editPost', postid, @username,
@password, content, publish)
end
end
end
- metaWeblog의 한계인지는 모르지만, category, author, link, pubDate 모두 무시됩니다.
난관 4. me2day처럼 매일매일 내가 중요한 글로 체크한 글들을 날짜단위로 포스팅 하기
- HanRSS에서는 pubDate에 원문날짜가 나오며 제가 중요한 글로 체크한 날짜 정보는 없습니다.
다행히 중요한 글 체크한 날짜가 최근글로 뿌려지고 있으니까 loop을 돌때 반대로 돌아야 최글글이 위에 나타 납니다.
result.items.each_with_index do |item, i|
puts item.title
puts item.description
end
puts item.title
puts item.description
end
대신에
result.items.reverse.each_with_index do |item,i|
puts item.title
puts item.description
end
puts item.title
puts item.description
end
난관 5. 제 블로그로 포스팅이 끝나면 HanRSS 중요한 글을 비워주기
- http://www.hanrss.com/api/get_starred_items.qst?empty=1
- 비워주면 끝인데? 테스트하기 두려움(?)
난관 6. 위의 과정을 통해 내 블로그에 엄청난 글들이 쌓이는데 이 과정에 대한 트랜잭션 개념을 도입하기
- client.newPost(blogpost,false) 함수의 리턴값으로 postid가 날라온다.
- 그렇지만 postid를 이용해 티스토리 블로그에서 글 지우기가 안되는듯
난관 7. 한꺼번에 많은 글이 포스팅되면 막혀버리는 문제
- HanRSS 중요한 글 보기 기준 중 25개 가 있으니 한번 호출에 100개씩만 이동 시키기
- 25개 이동이 끝나면 HanRSS에서 중요한 글 4페이지를 비워주자 (수동?)
현재까지 진행 상황은 여기까지이며, 이 삽질을 하느라 제 블로그에 엄청한 글들이 쌓였습니다.
문제는 그 사이 메타블로그에서 긁어가는 바람에 -.- 혹시 엄청난 펌 블로그로 오해하시는 분들이 계실까봐 걱정이네요.
암튼 그래서 만들어진 소스는...
require 'rss/2.0'
require 'open-uri'
require 'xmlrpc/client'
require 'open-uri'
require 'xmlrpc/client'
require 'xmlrpc/client'
module MetaWebLogAPI
class Client
def initialize(server, urlPath, blogid, username, password)
@client = XMLRPC::Client.new(server, urlPath)
@blogid = blogid
@username = username
@password = password
end
def newPost(content, publish)
@client.call('metaWeblog.newPost', @blogid, @username,
@password, content, publish)
end
class Client
def initialize(server, urlPath, blogid, username, password)
@client = XMLRPC::Client.new(server, urlPath)
@blogid = blogid
@username = username
@password = password
end
def newPost(content, publish)
@client.call('metaWeblog.newPost', @blogid, @username,
@password, content, publish)
end
def getPost(postid)
@client.call('metaWeblog.getPost', postid, @username,
@password)
end
@client.call('metaWeblog.getPost', postid, @username,
@password)
end
def editPost(postid, content, publish)
@client.call('metaWeblog.editPost', postid, @username,
@password, content, publish)
end
end
end
@client.call('metaWeblog.editPost', postid, @username,
@password, content, publish)
end
end
end
client = MetaWebLogAPI::Client.new('twiny.tistory.com','/api','BlogID','티스토리이메일','티스토리 비밀번호')
open('http://www.hanrss.com/api/get_starred_items.qst?results=100',:http_basic_authentication=>["한RSS이메일", "한RSS비밀번호"]) do |http|
response = http.read
result = RSS::Parser.parse(response, false)
open('http://www.hanrss.com/api/get_starred_items.qst?results=100',:http_basic_authentication=>["한RSS이메일", "한RSS비밀번호"]) do |http|
response = http.read
result = RSS::Parser.parse(response, false)
result.items.each_with_index do |item,i|
category = ["Shared RSS"]
blogpost = {
'title' => "#{item.title}" ,
'description' => "Source : <a href='#{item.link}' >#{item.link}</a><br/><br/>#{item.description}" ,
'link' => item.link,
'categories' => category ,
'pubDate' => item.pubDate
}
category = ["Shared RSS"]
blogpost = {
'title' => "#{item.title}" ,
'description' => "Source : <a href='#{item.link}' >#{item.link}</a><br/><br/>#{item.description}" ,
'link' => item.link,
'categories' => category ,
'pubDate' => item.pubDate
}
client.newPost(blogpost,false)
end
end
end
end
이올린에 북마크하기
이올린에 추천하기'Dev > Ruby on Rails' 카테고리의 다른 글
| Ruby on Rails와 함께하는 애자일 웹 개발 (1) | 2008/05/06 |
|---|---|
| 루비로 자동화 스크립트 만들면서 배운 것들 (0) | 2007/05/18 |
| HanRSS 중요한 글 가져오기 프로젝트 (3) | 2007/05/06 |
| 기묘의 신바람 나는 웹 개발, 루비 온 레일스 세미나 ㄱ ㄱ ㅆ (0) | 2007/04/25 |
| Ruby on Rails 개발 환경 - NetBeans 세팅하기 (0) | 2007/03/19 |
| Ruby on Rails : 초고속 웹 개발의 시작 (0) | 2007/01/02 |
Trackback Address :: http://twiny.tistory.com/trackback/637
드래곤네스트 CBT - 5월 15일 시작됩니다.
2009/05/11
서브버전에서 바이너리 데이타 다루기
2008/12/30
Chandler Project 또는 드리밍 인 코드
2008/12/27
썬테크 블로거 신청
2008/12/13
ㅎㅎ 우연히 다시 읽게된 예전 자기 소개
2008/10/29
서브버전에서 바이너리 데이타 다루기
2008/12/30
아주 얇은 아파치 이야기 - VirtualHost 와 모니터링
2008/06/20
Redmine - 한글과 관련된 문제와 해결책
2008/02/14
오랜만에... 맥 관련 포스팅 - 패러럴즈에서 와이브로 쓰기
2008/02/08
스프링노트 - 예리한데...
2007/05/05
MacJournal에서 Tistory로 포스팅 하기
2007/05/01
해킨토시가 된 T42 - 오리지널맥은 아니지만, 키감만은 쫀득쫀득
2007/04/29
Chandler Project 또는 드리밍 인 코드
2008/12/27
Hug a Developer Today
2008/09/22
3차 P-Camp 후기라고나 할까...
2008/06/12
개인의 생산성과 좀 더 나은 삶을 위한 블로그 모음
2008/03/21
나의 취향에 대하여...
2008/03/13
Ruby on Rails와 함께하는 애자일 웹 개발
2008/05/06
루비로 자동화 스크립트 만들면서 배운 것들
2007/05/18
HanRSS 중요한 글 가져오기 프로젝트
2007/05/06
기묘의 신바람 나는 웹 개발, 루비 온 레일스 세미나 ㄱ ㄱ ㅆ
2007/04/25
Ruby on Rails 개발 환경 - NetBeans 세팅하기
2007/03/19
