Analyze headers (#2129)
* Await analyzeHeaders promise + add tests * Parse js patterns when analyzing js * Put back parseJsPatterns where it was * Separete to devDependencies * Add apps object to isolate and prevent manual updates * Simplify wappalyzer.apps * Only use necessary input data per analyze use case * Remove package-lock.json * Checking in yarn.lock * Remove npm from test scriptmain
Andres Castillo
7 years ago
committed by
Elbert Alias
parent
89429b0995
commit
5d6ff3ac5b
@ -0,0 +1,144 @@
|
|||||||
|
/* eslint-env mocha */
|
||||||
|
|
||||||
|
'use strict';
|
||||||
|
|
||||||
|
const assert = require('chai').assert;
|
||||||
|
const Wappalyzer = require('../src/wappalyzer');
|
||||||
|
|
||||||
|
describe('should analyze website elements properly', function () {
|
||||||
|
|
||||||
|
it('should analyze html', async () => {
|
||||||
|
const html = `
|
||||||
|
<!DOCTYPE HTML>
|
||||||
|
<html>
|
||||||
|
<head>
|
||||||
|
<title>Page title | Html detection </title>
|
||||||
|
<meta charset="utf-8" />
|
||||||
|
</head>
|
||||||
|
<body>
|
||||||
|
<h1>Technologies Test Page | Html detection</h1>
|
||||||
|
<!-- Google Tag Manager -->
|
||||||
|
<noscript><iframe src="https://www.googletagmanager.com/ns.html?id=GTM-KAAOEOE"
|
||||||
|
height="0" width="0" style="display:none;visibility:hidden"></iframe></noscript>
|
||||||
|
<!-- End Google Tag Manager -->
|
||||||
|
</body>
|
||||||
|
</html>
|
||||||
|
`;
|
||||||
|
const wappalyzer = new Wappalyzer();
|
||||||
|
wappalyzer.apps = {
|
||||||
|
"Google Tag Manager": {
|
||||||
|
"html": [
|
||||||
|
"googletagmanager\\.com/ns\\.html[^>]+></iframe>",
|
||||||
|
"<!-- (?:End )?Google Tag Manager -->"
|
||||||
|
]
|
||||||
|
}
|
||||||
|
};
|
||||||
|
var applications = null;
|
||||||
|
wappalyzer.driver = {
|
||||||
|
log () {},
|
||||||
|
displayApps (detectedMap) {
|
||||||
|
applications = detectedMap;
|
||||||
|
}
|
||||||
|
};
|
||||||
|
|
||||||
|
await wappalyzer.analyze({ canonical: 'example.com' }, { html });
|
||||||
|
assert.equal(applications['Google Tag Manager'].name, 'Google Tag Manager');
|
||||||
|
});
|
||||||
|
|
||||||
|
it('should analyze scripts', async () => {
|
||||||
|
const scripts = [
|
||||||
|
'http://www.google-analytics.com/analytics.js',
|
||||||
|
'http://example.com/assets/js/jquery.min.js'
|
||||||
|
];
|
||||||
|
const wappalyzer = new Wappalyzer();
|
||||||
|
wappalyzer.apps = {
|
||||||
|
"Google Analytics": {
|
||||||
|
"cats": [
|
||||||
|
10
|
||||||
|
],
|
||||||
|
"script": "google-analytics\\.com\\/(?:ga|urchin|(analytics))\\.js\\;version:\\1?UA:"
|
||||||
|
},
|
||||||
|
"jQuery": {
|
||||||
|
"script": [
|
||||||
|
"jquery(?:\\-|\\.)([\\d.]*\\d)[^/]*\\.js\\;version:\\1",
|
||||||
|
"/([\\d.]+)/jquery(?:\\.min)?\\.js\\;version:\\1",
|
||||||
|
"jquery.*\\.js(?:\\?ver(?:sion)?=([\\d.]+))?\\;version:\\1"
|
||||||
|
]
|
||||||
|
}
|
||||||
|
};
|
||||||
|
var applications = null;
|
||||||
|
wappalyzer.driver = {
|
||||||
|
log () {},
|
||||||
|
displayApps (detectedMap) {
|
||||||
|
applications = detectedMap;
|
||||||
|
}
|
||||||
|
};
|
||||||
|
|
||||||
|
await wappalyzer.analyze({ canonical: 'example.com' }, { scripts });
|
||||||
|
assert.equal(applications['Google Analytics'].name, 'Google Analytics');
|
||||||
|
assert.equal(applications['jQuery'].name, 'jQuery');
|
||||||
|
});
|
||||||
|
|
||||||
|
it('should analyze headers', async () => {
|
||||||
|
const headers = {
|
||||||
|
'date': [ 'Thu, 01 Feb 2018 11:34:18 GMT' ],
|
||||||
|
'connection': [ 'keep-alive' ],
|
||||||
|
'x-powered-by': [ 'Express'],
|
||||||
|
'etag': [ 'W/125-1jQLmiya7mfec43xR3Eb3pjdu64s' ],
|
||||||
|
'content-length': [ '293' ],
|
||||||
|
'content-type': [ 'text/html; charset=utf-8' ]
|
||||||
|
};
|
||||||
|
const wappalyzer = new Wappalyzer();
|
||||||
|
wappalyzer.apps = {
|
||||||
|
"Express": {
|
||||||
|
"headers": {
|
||||||
|
"X-Powered-By": "^Express$"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
};
|
||||||
|
var applications = null;
|
||||||
|
wappalyzer.driver = {
|
||||||
|
log () {},
|
||||||
|
displayApps (detectedMap) {
|
||||||
|
applications = detectedMap;
|
||||||
|
}
|
||||||
|
};
|
||||||
|
|
||||||
|
await wappalyzer.analyze({ canonical: 'example.com' }, { headers });
|
||||||
|
assert.equal(applications['Express'].name, 'Express');
|
||||||
|
});
|
||||||
|
|
||||||
|
it('should analyze js globals', async () => {
|
||||||
|
const js = {
|
||||||
|
'Moment.js': { 'moment': { '0': true } },
|
||||||
|
'Google Font API': { 'WebFonts': { '0': true } }
|
||||||
|
};
|
||||||
|
const wappalyzer = new Wappalyzer();
|
||||||
|
wappalyzer.apps = {
|
||||||
|
"Moment.js": {
|
||||||
|
"js": {
|
||||||
|
"moment": "",
|
||||||
|
"moment.version": "(.*)\\;version:\\1"
|
||||||
|
}
|
||||||
|
},
|
||||||
|
"Google Font API": {
|
||||||
|
"js": {
|
||||||
|
"WebFonts": ""
|
||||||
|
}
|
||||||
|
}
|
||||||
|
};
|
||||||
|
var applications = null;
|
||||||
|
wappalyzer.driver = {
|
||||||
|
log () {},
|
||||||
|
displayApps (detectedMap) {
|
||||||
|
applications = detectedMap;
|
||||||
|
}
|
||||||
|
};
|
||||||
|
|
||||||
|
wappalyzer.parseJsPatterns();
|
||||||
|
await wappalyzer.analyze({ canonical: 'example.com' }, { js });
|
||||||
|
|
||||||
|
assert.equal(applications['Google Font API'].name, 'Google Font API');
|
||||||
|
assert.equal(applications['Moment.js'].name, 'Moment.js');
|
||||||
|
});
|
||||||
|
});
|
||||||
Reference in new issue