Encoding headers, wrapping eigenclasses
This commit is contained in:
parent
b97625597e
commit
e3cd3341b7
|
@ -6,10 +6,8 @@ require "nokogiri"
|
|||
require "cgi"
|
||||
|
||||
module MusicBrainz
|
||||
module Tools
|
||||
end
|
||||
module Parsers
|
||||
end
|
||||
module Tools; end
|
||||
module Parsers; end
|
||||
end
|
||||
|
||||
require "version"
|
||||
|
|
|
@ -17,7 +17,7 @@ module MusicBrainz
|
|||
|
||||
def load(params, query)
|
||||
parser = MusicBrainz::Parsers.get_by_name(params[:parser])
|
||||
xml = MusicBrainz::Tools::Proxy.load(query)
|
||||
xml = MusicBrainz::Tools::Proxy.query(query)
|
||||
result = parser[:const].send(parser[:method], Nokogiri::XML(xml))
|
||||
if params[:create_model]
|
||||
result_model = params[:create_model].new
|
||||
|
|
|
@ -1,4 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
module MusicBrainz
|
||||
module Parsers
|
||||
class << self
|
||||
|
|
|
@ -1,44 +1,47 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
module MusicBrainz
|
||||
module Tools
|
||||
class Cache
|
||||
@@cache_path = nil
|
||||
class << self
|
||||
@@cache_path = nil
|
||||
|
||||
def self.cache_path=(path)
|
||||
@@cache_path = path
|
||||
end
|
||||
|
||||
def self.cache_path
|
||||
@@cache_path
|
||||
end
|
||||
|
||||
def self.clear_cache
|
||||
FileUtils.rm_r(@@cache_path) if @@cache_path && File.exist?(@@cache_path)
|
||||
end
|
||||
|
||||
def self.cache_contents(url)
|
||||
response = nil
|
||||
url_parts = url.split('/')
|
||||
file_name = url_parts.pop
|
||||
directory = url_parts.pop
|
||||
file_path = @@cache_path ? "#{@@cache_path}/#{directory}/#{file_name}" : nil
|
||||
|
||||
if file_path && File.exist?(file_path)
|
||||
response = File.open(file_path).gets
|
||||
else
|
||||
response = yield
|
||||
|
||||
unless response.nil? or file_path.nil?
|
||||
FileUtils.mkdir_p file_path.split('/')[0..-2].join('/')
|
||||
file = File.new(file_path, 'w')
|
||||
file.puts(response.gets) # .force_encoding('UTF-8')
|
||||
file.chmod(0755)
|
||||
file.close
|
||||
response.rewind
|
||||
end
|
||||
def cache_path=(path)
|
||||
@@cache_path = path
|
||||
end
|
||||
|
||||
response
|
||||
def cache_path
|
||||
@@cache_path
|
||||
end
|
||||
|
||||
def clear_cache
|
||||
FileUtils.rm_r(@@cache_path) if @@cache_path && File.exist?(@@cache_path)
|
||||
end
|
||||
|
||||
def cache_contents(url)
|
||||
response = nil
|
||||
url_parts = url.split('/')
|
||||
file_name = url_parts.pop
|
||||
directory = url_parts.pop
|
||||
file_path = @@cache_path ? "#{@@cache_path}/#{directory}/#{file_name}" : nil
|
||||
|
||||
if file_path && File.exist?(file_path)
|
||||
response = File.open(file_path).gets
|
||||
else
|
||||
response = yield
|
||||
|
||||
unless response.nil? or file_path.nil?
|
||||
FileUtils.mkdir_p file_path.split('/')[0..-2].join('/')
|
||||
file = File.new(file_path, 'w')
|
||||
file.puts(response.gets) # .force_encoding('UTF-8')
|
||||
file.chmod(0755)
|
||||
file.close
|
||||
response.rewind
|
||||
end
|
||||
end
|
||||
|
||||
response
|
||||
end
|
||||
end
|
||||
end
|
||||
end
|
||||
|
|
|
@ -1,58 +1,61 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
module MusicBrainz
|
||||
module Tools
|
||||
class Proxy
|
||||
@@last_query_time = 0
|
||||
@@query_interval = 1.5 # Min: 1.0 Safe: 1.5
|
||||
@@tries_limit = 5
|
||||
class << self
|
||||
@@last_query_time = 0
|
||||
@@query_interval = 1.5 # Min: 1.0 Safe: 1.5
|
||||
@@tries_limit = 5
|
||||
|
||||
WEB_SERVICE_URL = 'http://musicbrainz.org/ws/2/'
|
||||
USER_AGENT = "gem musicbrainz (https://github.com/magnolia-fan/musicbrainz) @ " + Socket.gethostname
|
||||
WEB_SERVICE_URL = 'http://musicbrainz.org/ws/2/'
|
||||
USER_AGENT = "gem musicbrainz (https://github.com/magnolia-fan/musicbrainz) @ " + Socket.gethostname
|
||||
|
||||
def self.query_interval=(sec)
|
||||
@@query_interval = sec.to_f
|
||||
end
|
||||
def query_interval=(sec)
|
||||
@@query_interval = sec.to_f
|
||||
end
|
||||
|
||||
def self.query_interval
|
||||
@@query_interval
|
||||
end
|
||||
def query_interval
|
||||
@@query_interval
|
||||
end
|
||||
|
||||
def self.tries_limit=(num)
|
||||
@@tries_limit = num.to_i
|
||||
end
|
||||
def tries_limit=(num)
|
||||
@@tries_limit = num.to_i
|
||||
end
|
||||
|
||||
def self.load(params = {})
|
||||
url = WEB_SERVICE_URL + params[:resource].to_s.gsub('_', '-') + '/' + (params[:id].to_s || '')
|
||||
params.delete(:resource)
|
||||
params.delete(:id) unless params[:id].nil?
|
||||
url << '?' + params.map{ |k, v|
|
||||
k = k.to_s.gsub('_', '-')
|
||||
v = (v.is_a?(Array) ? v.map{ |_| _.to_s.gsub('_', '-') }.join('+') : v.to_s)
|
||||
k + '=' + v
|
||||
}.join('&') unless params.empty?
|
||||
MusicBrainz::Tools::Cache.cache_contents(url) {
|
||||
self.get_contents url
|
||||
}
|
||||
end
|
||||
def query(params = {})
|
||||
url = WEB_SERVICE_URL + params[:resource].to_s.gsub('_', '-') + '/' + (params[:id].to_s || '')
|
||||
params.delete(:resource)
|
||||
params.delete(:id) unless params[:id].nil?
|
||||
url << '?' + params.map{ |k, v|
|
||||
k = k.to_s.gsub('_', '-')
|
||||
v = (v.is_a?(Array) ? v.map{ |_| _.to_s.gsub('_', '-') }.join('+') : v.to_s)
|
||||
k + '=' + v
|
||||
}.join('&') unless params.empty?
|
||||
MusicBrainz::Tools::Cache.cache_contents(url) {
|
||||
get_contents url
|
||||
}
|
||||
end
|
||||
|
||||
def self.get_contents(url)
|
||||
response = nil
|
||||
def get_contents(url)
|
||||
response = nil
|
||||
|
||||
@@tries_limit.times {
|
||||
time_passed = Time.now.to_f - @@last_query_time
|
||||
sleep(@@query_interval - time_passed) if time_passed < @@query_interval
|
||||
@@tries_limit.times {
|
||||
time_passed = Time.now.to_f - @@last_query_time
|
||||
sleep(@@query_interval - time_passed) if time_passed < @@query_interval
|
||||
|
||||
begin
|
||||
response = open(url, "User-Agent" => USER_AGENT)
|
||||
@@last_query_time = Time.now.to_f
|
||||
rescue => e
|
||||
response = nil if e.io.status[0].to_i == 404
|
||||
end
|
||||
begin
|
||||
response = open(url, "User-Agent" => USER_AGENT)
|
||||
@@last_query_time = Time.now.to_f
|
||||
rescue => e
|
||||
response = nil if e.io.status[0].to_i == 404
|
||||
end
|
||||
|
||||
break unless response.nil?
|
||||
}
|
||||
break unless response.nil?
|
||||
}
|
||||
|
||||
response
|
||||
response
|
||||
end
|
||||
end
|
||||
end
|
||||
end
|
||||
|
|
|
@ -1,4 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
module MusicBrainz
|
||||
VERSION = "0.6.0"
|
||||
end
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "spec_helper"
|
||||
|
||||
describe MusicBrainz do
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "spec_helper"
|
||||
|
||||
describe MusicBrainz::Artist do
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "spec_helper"
|
||||
|
||||
describe MusicBrainz::ReleaseGroup do
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "spec_helper"
|
||||
|
||||
describe MusicBrainz::Release do
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "spec_helper"
|
||||
|
||||
describe MusicBrainz::Track do
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "rubygems"
|
||||
require "bundler/setup"
|
||||
require "ap"
|
||||
|
|
|
@ -1,3 +1,5 @@
|
|||
# -*- encoding: utf-8 -*-
|
||||
|
||||
require "spec_helper"
|
||||
|
||||
describe MusicBrainz::Tools::Cache do
|
||||
|
|
Loading…
Reference in New Issue