Merge pull request #5 from rgrove/url-functions

Quoted URLs are now tokenized as functions

Author: SimonSapin

component_value_list.json

@@ -122,12 +122,12 @@
 	["string", "Ͷ76Ͷ76"]
 ],
 
-"url( '') url('Lorem \"îpsum\"'\n) url('a\\\nb' ) url('a\nb' \\){ ) url('eof", [
-	["url", ""], " ",
-	["url", "Lorem \"îpsum\""], " ",
-	["url", "ab"], " ",
-	["error", "bad-url"], " ",
-	["url", "eof"]
+"url( '') url('Lorem \"îpsum\"'\n) url('a\\\nb' ) url('a\nb) url('eof", [
+	["function", "url", " ", ["string", ""]], " ",
+	["function", "url", ["string", "Lorem \"îpsum\""], " "], " ",
+	["function", "url", ["string", "ab"], " "], " ",
+	["function", "url", ["error", "bad-string"], " ", ["ident", "b"]], " ",
+	["function", "url", ["string", "eof"]]
 ],
 
 "url(", [
@@ -138,17 +138,17 @@
 	["url", ""]
 ],
 
-"url(\"\") url(\"Lorem 'îpsum'\"\n) url(\"a\\\nb\" ) url(\"a\nb\" \\){ ) url(\"eof", [
-	["url", ""], " ",
-	["url", "Lorem 'îpsum'"], " ",
-	["url", "ab"], " ",
-	["error", "bad-url"], " ",
-	["url", "eof"]
+"url(\"\") url(\"Lorem 'îpsum'\"\n) url(\"a\\\nb\" ) url(\"a\nb) url(\"eof", [
+	["function", "url", ["string", ""]], " ",
+	["function", "url", ["string", "Lorem 'îpsum'"], " "], " ",
+	["function", "url", ["string", "ab"], " "], " ",
+	["function", "url", ["error", "bad-string"], " ", ["ident", "b"]], " ",
+	["function", "url", ["string", "eof"]]
 ],
 
 "url(\"Lo\\rem \\130 ps\\u m\") url('\\376\\37 6\\000376\\0000376\\", [
-	["url", "Lorem İpsu m"], " ",
-	["url", "Ͷ76Ͷ76"]
+	["function", "url", ["string", "Lorem İpsu m"]], " ",
+	["function", "url", ["string", "Ͷ76Ͷ76"]]
 ],
 
 "URL(foo) Url(foo) ûrl(foo) url (foo) url\\ (foo) url(\t 'foo' ", [
@@ -157,12 +157,18 @@
 	["function", "ûrl", ["ident", "foo"]], " ",
 	["ident", "url"], " ", ["()", ["ident", "foo"]], " ",
 	["function", "url ", ["ident", "foo"]], " ",
-	["url", "foo"]
+	["function", "url", " ", ["string", "foo"], " "]
 ],
 
-"url('a' b) url('c' d)", [["error", "bad-url"], " ", ["error", "bad-url"]],
+"url('a' b) url('c' d)", [
+	["function", "url", ["string", "a"], " ", ["ident", "b"]], " ",
+	["function", "url", ["string", "c"], " ", ["ident", "d"]]
+],
 
-"url('a\nb') url('c\n", [["error", "bad-url"], " ", ["error", "bad-url"]],
+"url('a\nb) url('c\n", [
+	["function", "url", ["error", "bad-string"], " ", ["ident", "b"]], " ",
+	["function", "url", ["error", "bad-string"], " "]
+],
 
 "url() url( \t) url(\n Foô\\030\n!\n) url(\na\nb\n) url(a\\ b) url(a(b) url(a\\(b) url(a'b) url(a\\'b) url(a\"b) url(a\\\"b) url(a\nb) url(a\\\nb) url(a\\a b) url(a\\", [
 	["url", ""], " ",