Fixed the ejabberd importer to work with the pipe sign "|" as a separator in erlang...
authorWaqas Hussain <waqas20@gmail.com>
Sat, 29 Nov 2008 21:08:37 +0000 (02:08 +0500)
committerWaqas Hussain <waqas20@gmail.com>
Sat, 29 Nov 2008 21:08:37 +0000 (02:08 +0500)
tools/ejabberd2prosody.lua
tools/erlparse.lua

index 26984376424261189b55a0a13ee224a9f9c1a2d1..e36a6943062a65231de0ea1454d4493a8b4127d3 100755 (executable)
 #!/usr/bin/env lua
-
-require "erlparse";
-require "serialize";
-
-package.path = package.path ..";../?.lua";
-local st = require "util.stanza";
-package.loaded["util.logger"] = {init = function() return function() end; end}
-local dm = require "util.datamanager"
-local data_path = "data";
-dm.set_data_path(data_path);
-
-local _mkdir = {}
-function mkdir(path)
-       if os.getenv("WINDIR") then
-               -- I'm afraid it's true :(
-               path = path:gsub("/", "\\");
-       end
-       --print("mkdir",path);
-       local x = io.popen("mkdir "..path.." 2>&1"):read("*a");
-end
-function encode(s) return s and (s:gsub("%W", function (c) return string.format("%%%x", c:byte()); end)); end
-function getpath(username, host, datastore, ext)
-       ext = ext or "dat";
-       if username then
-               return format("%s/%s/%s/%s.%s", data_path, encode(host), datastore, encode(username), ext);
-       elseif host then
-               return format("%s/%s/%s.%s", data_path, encode(host), datastore, ext);
-       else
-               return format("%s/%s.%s", data_path, datastore, ext);
-       end
-end
-function mkdirs(host)
-       if not _mkdir[host] then
-               local host_dir = string.format("%s/%s", data_path, encode(host));
-               mkdir(host_dir);
-               mkdir(host_dir.."/accounts");
-               mkdir(host_dir.."/vcard");
-               mkdir(host_dir.."/roster");
-               mkdir(host_dir.."/private");
-               mkdir(host_dir.."/offline");
-               _mkdir[host] = true;
-       end
-end
-mkdir(data_path);
-
-function build_stanza(tuple, stanza)
-       if tuple[1] == "xmlelement" then
-               local name = tuple[2];
-               local attr = {};
-               for _, a in ipairs(tuple[3]) do attr[a[1]] = a[2]; end
-               local up;
-               if stanza then stanza:tag(name, attr); up = true; else stanza = st.stanza(name, attr); end
-               for _, a in ipairs(tuple[4]) do build_stanza(a, stanza); end
-               if up then stanza:up(); else return stanza end
-       elseif tuple[1] == "xmlcdata" then
-               stanza:text(tuple[2]);
-       else
-               error("unknown element type: "..serialize.serialize(tuple));
-       end
-end
-function build_time(tuple)
-       local Megaseconds,Seconds,Microseconds = unpack(tuple);
-       return Megaseconds * 1000000 + Seconds;
-end
-
-function vcard(node, host, stanza)
-       mkdirs(host);
-       local ret, err = dm.store(node, host, "vcard", st.preserialize(stanza));
-       print("["..(err or "success").."] vCard: "..node.."@"..host);
-end
-function password(node, host, password)
-       mkdirs(host);
-       local ret, err = dm.store(node, host, "accounts", {password = password});
-       print("["..(err or "success").."] accounts: "..node.."@"..host.." = "..password);
-end
-function roster(node, host, jid, item)
-       mkdirs(host);
-       local roster = dm.load(node, host, "roster") or {};
-       roster[jid] = item;
-       local ret, err = dm.store(node, host, "roster", roster);
-       print("["..(err or "success").."] roster: " ..node.."@"..host.." - "..jid);
-end
-function private_storage(node, host, xmlns, stanza)
-       mkdirs(host);
-       local private = dm.load(node, host, "private") or {};
-       private[xmlns] = st.preserialize(stanza);
-       local ret, err = dm.store(node, host, "private", private);
-       print("["..(err or "success").."] private: " ..node.."@"..host.." - "..xmlns);
-end
-function offline_msg(node, host, t, stanza)
-       mkdirs(host);
-       stanza.attr.stamp = os.date("!%Y-%m-%dT%H:%M:%SZ", t);
-       stanza.attr.stamp_legacy = os.date("!%Y%m%dT%H:%M:%S", t);
-       local ret, err = dm.list_append(node, host, "offline", st.preserialize(stanza));
-       print("["..(err or "success").."] offline: " ..node.."@"..host.." - "..os.date("!%Y-%m-%dT%H:%M:%SZ", t));
-end
-
-
-local filters = {
-       passwd = function(tuple)
-               password(tuple[2][1], tuple[2][2], tuple[3]);
-       end;
-       vcard = function(tuple)
-               vcard(tuple[2][1], tuple[2][2], build_stanza(tuple[3]));
-       end;
-       roster = function(tuple)
-               local node = tuple[3][1]; local host = tuple[3][2];
-               local contact = tuple[4][1].."@"..tuple[4][2];
-               local name = tuple[5]; local subscription = tuple[6];
-               local ask = tuple[7]; local groups = tuple[8];
-               if type(name) ~= type("") then name = nil; end
-               if ask == "none" then ask = nil; elseif ask == "out" then ask = "subscribe" else error(ask) end
-               if subscription ~= "both" and subscription ~= "from" and subscription ~= "to" and subscription ~= "none" then error(subscription) end
-               local item = {name = name, ask = ask, subscription = subscription, groups = {}};
-               for _, g in ipairs(groups) do item.groups[g] = true; end
-               roster(node, host, contact, item);
-       end;
-       private_storage = function(tuple)
-               private_storage(tuple[2][1], tuple[2][2], tuple[2][3], build_stanza(tuple[3]));
-       end;
-       offline_msg = function(tuple)
-               offline_msg(tuple[2][1], tuple[2][2], build_time(tuple[3]), build_stanza(tuple[7]));
-       end;
-       config = function(tuple)
-               if tuple[2] == "hosts" then
-                       local output = io.output(); io.output("prosody.cfg.lua");
-                       io.write("-- Configuration imported from ejabberd --\n");
-                       io.write([[Host "*"
-       modules_enabled = {
-               "saslauth"; -- Authentication for clients and servers. Recommended if you want to log in.
-               "legacyauth"; -- Legacy authentication. Only used by some old clients and bots.
-               "roster"; -- Allow users to have a roster. Recommended ;)
-               "register"; -- Allow users to register on this server using a client
-               "tls"; -- Add support for secure TLS on c2s/s2s connections
-               "vcard"; -- Allow users to set vCards
-               "private"; -- Private XML storage (for room bookmarks, etc.)
-               "version"; -- Replies to server version requests
-               "dialback"; -- s2s dialback support
-               "uptime";
-               "disco";
-               "time";
-               "ping";
-               --"selftests";
-       };
-]]);
-                       for _, h in ipairs(tuple[3]) do
-                               io.write("Host \"" .. h .. "\"\n");
-                       end
-                       io.output(output);
-                       print("prosody.cfg.lua created");
-               end
-       end;
-};
-
-local arg = ...;
-local help = "/? -? ? /h -h /help -help --help";
-if not arg or help:find(arg, 1, true) then
-       print([[ejabberd db dump importer for Prosody
-
-  Usage: ejabberd2prosody.lua filename.txt
-
-The file can be generated from ejabberd using:
-  sudo ./bin/ejabberdctl dump filename.txt
-
-Note: The path of ejabberdctl depends on your ejabberd installation, and ejabberd needs to be running for ejabberdctl to work.]]);
-       os.exit(1);
-end
-local count = 0;
-local t = {};
-for item in erlparse.parseFile(arg) do
-       count = count + 1;
-       local name = item[1];
-       t[name] = (t[name] or 0) + 1;
-       --print(count, serialize.serialize(item));
-       if filters[name] then filters[name](item); end
-end
---print(serialize.serialize(t));
+\r
+require "erlparse";\r
+require "serialize";\r
+\r
+package.path = package.path ..";../?.lua";\r
+local st = require "util.stanza";\r
+package.loaded["util.logger"] = {init = function() return function() end; end}\r
+local dm = require "util.datamanager"\r
+local data_path = "data";\r
+dm.set_data_path(data_path);\r
+\r
+local path_separator = "/"; if os.getenv("WINDIR") then path_separator = "\\" end\r
+local _mkdir = {}\r
+function mkdir(path)\r
+       path = path:gsub("/", path_separator);\r
+       --print("mkdir",path);\r
+       local x = io.popen("mkdir "..path.." 2>&1"):read("*a");\r
+end\r
+function encode(s) return s and (s:gsub("%W", function (c) return string.format("%%%x", c:byte()); end)); end\r
+function getpath(username, host, datastore, ext)\r
+       ext = ext or "dat";\r
+       if username then\r
+               return format("%s/%s/%s/%s.%s", data_path, encode(host), datastore, encode(username), ext);\r
+       elseif host then\r
+               return format("%s/%s/%s.%s", data_path, encode(host), datastore, ext);\r
+       else\r
+               return format("%s/%s.%s", data_path, datastore, ext);\r
+       end\r
+end\r
+function mkdirs(host)\r
+       if not _mkdir[host] then\r
+               local host_dir = string.format("%s/%s", data_path, encode(host));\r
+               mkdir(host_dir);\r
+               mkdir(host_dir.."/accounts");\r
+               mkdir(host_dir.."/vcard");\r
+               mkdir(host_dir.."/roster");\r
+               mkdir(host_dir.."/private");\r
+               mkdir(host_dir.."/offline");\r
+               _mkdir[host] = true;\r
+       end\r
+end\r
+mkdir(data_path);\r
+\r
+function build_stanza(tuple, stanza)\r
+       if tuple[1] == "xmlelement" then\r
+               local name = tuple[2];\r
+               local attr = {};\r
+               for _, a in ipairs(tuple[3]) do attr[a[1]] = a[2]; end\r
+               local up;\r
+               if stanza then stanza:tag(name, attr); up = true; else stanza = st.stanza(name, attr); end\r
+               for _, a in ipairs(tuple[4]) do build_stanza(a, stanza); end\r
+               if up then stanza:up(); else return stanza end\r
+       elseif tuple[1] == "xmlcdata" then\r
+               stanza:text(tuple[2]);\r
+       else\r
+               error("unknown element type: "..serialize.serialize(tuple));\r
+       end\r
+end\r
+function build_time(tuple)\r
+       local Megaseconds,Seconds,Microseconds = unpack(tuple);\r
+       return Megaseconds * 1000000 + Seconds;\r
+end\r
+\r
+function vcard(node, host, stanza)\r
+       mkdirs(host);\r
+       local ret, err = dm.store(node, host, "vcard", st.preserialize(stanza));\r
+       print("["..(err or "success").."] vCard: "..node.."@"..host);\r
+end\r
+function password(node, host, password)\r
+       mkdirs(host);\r
+       local ret, err = dm.store(node, host, "accounts", {password = password});\r
+       print("["..(err or "success").."] accounts: "..node.."@"..host.." = "..password);\r
+end\r
+function roster(node, host, jid, item)\r
+       mkdirs(host);\r
+       local roster = dm.load(node, host, "roster") or {};\r
+       roster[jid] = item;\r
+       local ret, err = dm.store(node, host, "roster", roster);\r
+       print("["..(err or "success").."] roster: " ..node.."@"..host.." - "..jid);\r
+end\r
+function private_storage(node, host, xmlns, stanza)\r
+       mkdirs(host);\r
+       local private = dm.load(node, host, "private") or {};\r
+       private[xmlns] = st.preserialize(stanza);\r
+       local ret, err = dm.store(node, host, "private", private);\r
+       print("["..(err or "success").."] private: " ..node.."@"..host.." - "..xmlns);\r
+end\r
+function offline_msg(node, host, t, stanza)\r
+       mkdirs(host);\r
+       stanza.attr.stamp = os.date("!%Y-%m-%dT%H:%M:%SZ", t);\r
+       stanza.attr.stamp_legacy = os.date("!%Y%m%dT%H:%M:%S", t);\r
+       local ret, err = dm.list_append(node, host, "offline", st.preserialize(stanza));\r
+       print("["..(err or "success").."] offline: " ..node.."@"..host.." - "..os.date("!%Y-%m-%dT%H:%M:%SZ", t));\r
+end\r
+\r
+\r
+local filters = {\r
+       passwd = function(tuple)\r
+               password(tuple[2][1], tuple[2][2], tuple[3]);\r
+       end;\r
+       vcard = function(tuple)\r
+               vcard(tuple[2][1], tuple[2][2], build_stanza(tuple[3]));\r
+       end;\r
+       roster = function(tuple)\r
+               local node = tuple[3][1]; local host = tuple[3][2];\r
+               local contact = tuple[4][1].."@"..tuple[4][2];\r
+               local name = tuple[5]; local subscription = tuple[6];\r
+               local ask = tuple[7]; local groups = tuple[8];\r
+               if type(name) ~= type("") then name = nil; end\r
+               if ask == "none" then ask = nil; elseif ask == "out" then ask = "subscribe" else error(ask) end\r
+               if subscription ~= "both" and subscription ~= "from" and subscription ~= "to" and subscription ~= "none" then error(subscription) end\r
+               local item = {name = name, ask = ask, subscription = subscription, groups = {}};\r
+               for _, g in ipairs(groups) do item.groups[g] = true; end\r
+               roster(node, host, contact, item);\r
+       end;\r
+       private_storage = function(tuple)\r
+               private_storage(tuple[2][1], tuple[2][2], tuple[2][3], build_stanza(tuple[3]));\r
+       end;\r
+       offline_msg = function(tuple)\r
+               offline_msg(tuple[2][1], tuple[2][2], build_time(tuple[3]), build_stanza(tuple[7]));\r
+       end;\r
+       config = function(tuple)\r
+               if tuple[2] == "hosts" then\r
+                       local output = io.output(); io.output("prosody.cfg.lua");\r
+                       io.write("-- Configuration imported from ejabberd --\n");\r
+                       io.write([[Host "*"\r
+       modules_enabled = {\r
+               "saslauth"; -- Authentication for clients and servers. Recommended if you want to log in.\r
+               "legacyauth"; -- Legacy authentication. Only used by some old clients and bots.\r
+               "roster"; -- Allow users to have a roster. Recommended ;)\r
+               "register"; -- Allow users to register on this server using a client\r
+               "tls"; -- Add support for secure TLS on c2s/s2s connections\r
+               "vcard"; -- Allow users to set vCards\r
+               "private"; -- Private XML storage (for room bookmarks, etc.)\r
+               "version"; -- Replies to server version requests\r
+               "dialback"; -- s2s dialback support\r
+               "uptime";\r
+               "disco";\r
+               "time";\r
+               "ping";\r
+               --"selftests";\r
+       };\r
+]]);\r
+                       for _, h in ipairs(tuple[3]) do\r
+                               io.write("Host \"" .. h .. "\"\n");\r
+                       end\r
+                       io.output(output);\r
+                       print("prosody.cfg.lua created");\r
+               end\r
+       end;\r
+};\r
+\r
+local arg = ...;\r
+local help = "/? -? ? /h -h /help -help --help";\r
+if not arg or help:find(arg, 1, true) then\r
+       print([[ejabberd db dump importer for Prosody\r
+\r
+  Usage: ejabberd2prosody.lua filename.txt\r
+\r
+The file can be generated from ejabberd using:\r
+  sudo ./bin/ejabberdctl dump filename.txt\r
+\r
+Note: The path of ejabberdctl depends on your ejabberd installation, and ejabberd needs to be running for ejabberdctl to work.]]);\r
+       os.exit(1);\r
+end\r
+local count = 0;\r
+local t = {};\r
+for item in erlparse.parseFile(arg) do\r
+       count = count + 1;\r
+       local name = item[1];\r
+       t[name] = (t[name] or 0) + 1;\r
+       --print(count, serialize.serialize(item));\r
+       if filters[name] then filters[name](item); end\r
+end\r
+--print(serialize.serialize(t));\r
index c4372243273838cc0743a1ffa51fee8b405391fa..3fbb696fc31482130efe4272236ae1620b024eae 100644 (file)
@@ -98,7 +98,7 @@ readItem = function()
                return readString();\r
        elseif ch == "<" then\r
                return readSpecialString();\r
-       elseif isSpace(ch) or ch == "," then\r
+       elseif isSpace(ch) or ch == "," or ch == "|" then\r
                read();\r
                return readItem();\r
        else\r