crawler-ninja
Version:
A web crawler made for the SEO based on plugins. Please wait or contribute ... still in beta
92 lines (88 loc) • 1.01 kB
JavaScript
module.exports.list = function () {
return [
"xml",
"atom",
"rss",
"mml",
"txt",
"jad",
"wml",
"htc",
"woff",
"jar ",
"war ",
"ear",
"hqx",
"doc",
"pdf",
"ps ",
"eps ",
"ai",
"rtf",
"m3u8",
"xls",
"eot",
"ppt",
"wmlc",
"kml",
"kmz",
"7z",
"cco",
"jardiff",
"jnlp",
"run",
"pl ",
"pm",
"prc ",
"pdb",
"rar",
"rpm",
"sea",
"swf",
"sit",
"tcl ",
"tk",
"der ",
"pem ",
"crt",
"xpi",
"xspf",
"zip",
"bin ",
"exe ",
"dll",
"deb",
"dmg",
"iso ",
"img",
"msi ",
"msp ",
"msm",
"docx",
"xlsx",
"pptx",
"mid ",
"midi ",
"kar",
"mp3",
"ogg",
"m4a",
"ra",
"3gpp ",
"3gp",
"ts",
"mp4",
"mpeg ",
"mpg",
"mov",
"webm",
"flv",
"m4v",
"mng",
"asx ",
"asf",
"wmv",
"avi",
"epub"
];
};