Ein Artikel über die Modulpfadanalyse in Node.js

Dieser Artikel führt Sie durch die Modulpfadanalyse in Node.js und stellt die Node-Modulpfadanalysemethode vor.

requireFall

• Es gibt derzeit ein Projekt
• Aktueller Projektpfad /Benutzer/ rainbow /Documents/front-end/scaffolding development/rainbow-test
• Es gibt eine Reihe von Dateien im Projekt-Bin-Verzeichnis

require案例

• 当前有一个项目
• 当前项目路径/Users/rainbow/Documents/前端/脚手架开发/rainbow-test
• 项目bin目录下有一堆文件

• /bin/index.js

console.log(require.resolve("."));
// /Users/rainbow/Documents/前端/脚手架开发/rainbow-test/bin/index.js  输出bin/index.js的绝对路径
console.log(require.resolve.paths("."));
// [ '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/bin' ] 输出的文件可能在的路径的数组

console.log(require.resolve("yargs"));
// /Users/rainbow/Documents/前端/脚手架开发/rainbow-test/node_modules/yargs/index.cjs
console.log(require.resolve.paths("yargs"));
/*
[
  '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/bin/node_modules',
  '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/node_modules',
  '/Users/rainbow/Documents/前端/脚手架开发/node_modules',
  '/Users/rainbow/Documents/前端/node_modules',
  '/Users/rainbow/Documents/node_modules',
  '/Users/rainbow/node_modules',
  '/Users/node_modules',
  '/node_modules',
  '/Users/rainbow/.node_modules',
  '/Users/rainbow/.node_libraries',
  '/usr/local/Cellar/node/14.3.0_1/lib/node'
]
*/

require解析并找到模块执行文件的流程

1、Nodejs项目模块路径解析是通过require.resolve方式实现的。

• require.resolve就是通过Module._resolveFileName方法实现的
• Module._resolveFileName核心流程是：
  • 判断该路径是否是内置模块
  • 不是，则通过Module._resolveLookupPahts方法，生成node_modules可能存在的路径，如果传入的路径是’/test/lerna/cli.js’，在每一级路径下加上node_moduels的路径数组
  • 通过Module._findPath查询模块的真实路径，

2、Module._findPath核心流程是：

• 查询缓存(将request和paths通过x00合并生成cacheKey)
• 遍历 Module._resolveLookupPahts方法生成的paths数组，将path与request组成文件路径basePath
• 如果basePath存在则调用fs.realPahtSync获取文件的真实路径
• 将文件真实路径缓存到Module._pathCache（key为cacheKey）(Module._pathCache就是一个map)

3、fs.realPahtSync核心流程：

• 查询缓存(缓存的key为p。即Module._findPath中生成的路径)
• 从左往右遍历路径字符串，查询到/时，拆分路径，判断该路径是否为软链接，如果是软链接则查询真实链接，并生成新路径p，然后继续让后遍历，这里有一个细节：
• 遍历过程中生成的子路径base会缓存在knownHard和cache中，避免重复查询
• 遍历完成得到模块对应的真实路径，此时会将原始路径original作为key，真实路径作为value，保存到缓存中

4、require.resolve.paths等价于Module._resolveLookupPaths,该方法获取所有node_modules可能存在的路径组成一个数组。

5、require.resolve.paths实现原理是：

• 如果是/（根路径）直接返回['/node_modules']
• 否则，将路径字符串从后往前遍历，查询到/时，拆分路径，在后面加上node_modules,并传入一个paths数组，直到查询不到/后返回paths数组

require使用到内置模块的方法

当我们使用require('yargs')时

require方法

• 实际使用的是Module._load方法

Module.prototype.require = function(id) { //id = 'yargs'
  validateString(id, 'id');
  if (id === '') {
    throw new ERR_INVALID_ARG_VALUE('id', id, 'must be a non-empty string');
  }
  requireDepth++;
  try {
    return Module._load(id, this, /* isMain */ false);
  } finally {
    requireDepth--;
  }
};

// 参数
id = 'yargs'
this={
 paths: Module._nodeModulePaths(process.cwd())
}

Module._nodeModulePaths方法

// 进入mac电脑所在的逻辑：
// from => /Users/rainbow/Documents/前端/脚手架开发/lerna源码/lernas  //'from' is the __dirname of the module.
  Module._nodeModulePaths = function(from) {
    from = path.resolve(from);
    // Return early not only to avoid unnecessary work, but to *avoid* returning
    // an array of two items for a root: [ '//node_modules', '/node_modules' ]
    if (from === '/')
      return ['/node_modules'];

    const paths = [];
    
   // 关键算法代码
    for (let i = from.length - 1, p = 0, last = from.length; i >= 0; --i) {
      const code = from.charCodeAt(i);
      if (code === CHAR_FORWARD_SLASH) {
        if (p !== nmLen)
          paths.push(from.slice(0, last) + '/node_modules');
        last = i;
        p = 0;
      } else if (p !== -1) {
        if (nmChars[p] === code) {
          ++p;
        } else {
          p = -1;
        }
      }
    }

    // Append /node_modules to handle root paths.
    paths.push('/node_modules');

    return paths;
  };

for循环的核心算法解析：

Module._load方法

Module._load(id, this, /* isMain */ false)

核心实现代码是：const filename = Module._resolveFilename(request, parent, isMain);

require.resolve

Node.js项目模块路径解析是通过require.resolve方式实现的。

• require.resolve就是通过Module._resolveFileName方法实现的，

// node.js内置模块require的源代码
function resolve(request, options) {
  validateString(request, 'request');
  return Module._resolveFilename(request, mod, false, options); //核心实现
}

require.resolve = resolve;

function paths(request) {
  validateString(request, 'request');
  return Module._resolveLookupPaths(request, mod); //核心代码
}

resolve.paths = paths;

Module._resolveFileName核心流程

• 判断该路径是否是内置模块
• 不是，则通过Module._resolveLookupPahts方法，将paths和环境中的路径结合起来
• 通过Module._findPath查询模块的真实路径

return Module._resolveFilename(request, parent, isMain);

• /bin/ index.js

Module._resolveFilename = function(request, parent, isMain, options) {
  if (NativeModule.canBeRequiredByUsers(request)) { //是否为内置模块
    return request;
  }

  let paths;
  // 让paths和环境变量中的paths结合
  paths = Module._resolveLookupPaths(request, parent); //核心代码
  
  if (parent && parent.filename) {
    // 读取filename对应的package.json文件，看是否有exports字段，当前filename = false
    const filename = trySelf(parent.filename, request);
    if (filename) { //false
      const cacheKey = request + '\x00' +
          (paths.length === 1 ? paths[0] : paths.join('\x00'));
      Module._pathCache[cacheKey] = filename;
      return filename;
    }
  }

 //关键代码，找到本地执行文件 // Look up the filename first, since that's the cache key. 
  const filename = Module._findPath(request, paths, isMain, false);
  if (filename) return filename;
  // ...
};

[
  '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/bin/node_modules',
  '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/node_modules',
  '/Users/rainbow/Documents/前端/脚手架开发/node_modules',
  '/Users/rainbow/Documents/前端/node_modules',
  '/Users/rainbow/Documents/node_modules',
  '/Users/rainbow/node_modules',
  '/Users/node_modules',
  '/node_modules',
  '/Users/rainbow/.node_modules',
  '/Users/rainbow/.node_libraries',
  '/usr/local/Cellar/node/14.3.0_1/lib/node'
]

requireDer Prozess des Parsens und Findens von Modulausführungsdateien

1. 🎜Nodejs🎜Die Projektmodulpfadauflösung wird durch require implementiert. Auflösung-Methode. 🎜

• require.resolve wird durch die Methode Module._resolveFileName implementiert
• Module._resolveFileNameDer Kernprozess ist:
  < li>Bestimmen Sie, ob der Pfad ein integriertes Modul ist
  • Wenn nicht, verwenden Sie die Methode Module._resolveLookupPahts, um mögliche Pfade für node_modules zu generieren. Wenn der eingehende Pfad „/“ ist. test/lerna /cli.js‘, fügen Sie das Pfadarray von node_moduls unter jeder Pfadebene hinzu
  • Fragen Sie den tatsächlichen Pfad des Moduls über Module._findPath</ ab. code>, < /li></ul></li></ul>🎜2. <code>Module._findPath Der Kernprozess ist: 🎜
    • Abfragecache (Anfrage übergeben und Pfade durch x00Zusammenführen, um cacheKey zu generieren)
    • Durchlaufen Sie das von der Methode Module._resolveLookupPahts generierte Pfadarray und vergleichen Sie es path mit request bildet den Dateipfad basePath
    • Wenn basePath vorhanden ist, rufen Sie fs.realPahtSync</code auf > um den tatsächlichen Pfad der Datei zu erhalten</li> <li>Zwischenspeichern Sie den tatsächlichen Pfad der Datei in <code>Module._pathCache (Schlüssel ist CacheKey) (Module._pathCache ist eine Karte)
    🎜3. fs.realPahtSync< /code>Kernprozess: 🎜<ul><li>Cache abfragen (der Cache-Schlüssel ist p. Das ist der in Module._findPath generierte Pfad)</li ><li>Durchlaufen Sie die Pfadzeichenfolge von links nach rechts und fragen Sie / ab. Teilen Sie den Pfad auf und bestimmen Sie, ob es sich um einen Softlink handelt. Fragen Sie den tatsächlichen Link ab und generieren Sie dann einen neuen Pfad Weiter durchqueren. Hier ist ein Detail: </li><li>Während des Durchquerungsprozesses wird die generierte Unterpfadbasis in KnownHard und zwischengespeichert, um wiederholte Abfragen zu vermeiden</li><li>Nachdem die Durchquerung abgeschlossen ist, Der dem Modul entsprechende tatsächliche Pfad wird als Schlüssel und der tatsächliche Pfad als Wert verwendet und im Cache gespeichert </li></ul>🎜4 >require.resolve.paths entspricht Module._resolveLookupPaths. Diese Methode ruft alle möglichen Pfade von node_modules ab, um ein Array zu bilden. 🎜🎜5. Das Implementierungsprinzip von require.resolve.paths lautet: 🎜
    • Wenn es / (Stammpfad) ist, geben Sie direkt zurück ['/node_modules ']
    • Andernfalls durchlaufen Sie die Pfadzeichenfolge von hinten nach vorne, teilen Sie den Pfad, fügen Sie am Ende node_modules hinzu und übergeben Sie ein Pfadarray bis Die Abfrage wird nicht mehr zurückgegeben. Geben Sie das Pfadarray zurück
    🎜🎜require mit der Methode des integrierten Moduls🎜Wenn wir require('yargs')< verwenden /code>🎜 🎜<span style="max-width:90%">🎜require method</strong></span>🎜<ul><li>Die eigentliche Verwendung ist der <code>Module._load</code > method</li ></ul><div class="code" style="position:relative; padding:0px; margin:0px;"><div class="code" style="position:relative; padding:0px; margin:0px;"><pre class='brush:php;toolbar:false;'>Module._resolveLookupPaths = function(request, parent) { if (NativeModule.canBeRequiredByUsers(request)) { debug(&amp;#39;looking for %j in []&amp;#39;, request); return null; } // Check for node modules paths. if (request.charAt(0) !== &amp;#39;.&amp;#39; || (request.length &gt; 1 &amp;&amp; request.charAt(1) !== &amp;#39;.&amp;#39; &amp;&amp; request.charAt(1) !== &amp;#39;/&amp;#39; &amp;&amp; (!isWindows || request.charAt(1) !== &amp;#39;\&amp;#39;))){ let paths = modulePaths; if (parent != null &amp;&amp; parent.paths &amp;&amp; parent.paths.length) { paths = parent.paths.concat(paths); } debug(&amp;#39;looking for %j in %j&amp;#39;, request, paths); return paths.length &gt; 0 ? paths : null; } // In REPL, parent.filename is null. if (!parent || !parent.id || !parent.filename) { // Make require(&amp;#39;./path/to/foo&amp;#39;) work - normally the path is taken // from realpath(__filename) but in REPL there is no filename const mainPaths = [&amp;#39;.&amp;#39;]; debug(&amp;#39;looking for %j in %j&amp;#39;, request, mainPaths); return mainPaths; } debug(&amp;#39;RELATIVE: requested: %s from parent.id %s&amp;#39;, request, parent.id); const parentDir = [path.dirname(parent.filename)]; debug(&amp;#39;looking for %j&amp;#39;, parentDir); return parentDir; };</pre><div class="contentsignin">Nach dem Login kopieren</div></div><div class="contentsignin">Nach dem Login kopieren</div></div>rrree🎜🎜<code>Module._nodeModulePathsmethod🎜🎜🎜rrreee🎜Kernalgorithmusanalyse der for-Schleife:🎜🎜🎜🎜🎜Module._load< /code>Methode</strong></span>🎜🎜<code>Module._load(id, this, /* isMain */ false)🎜🎜Der Kernimplementierungscode ist: < code>const filename = Module ._resolveFilename(request, parent, isMain);🎜🎜🎜require.resolve 🎜🎜 Die Pfadauflösung des Node.js-Projektmoduls wird durch die Methode require.resolve implementiert. 🎜
    • require.resolve wird durch die Methode Module._resolveFileName implementiert,
    rrreee🎜🎜 Module._resolveFileNameKernprozess🎜
    • Bestimmen Sie, ob der Pfad ein integriertes Modul ist
    • Wenn nicht, übergeben Sie Module._resolveLookupPahts-Methode, kombiniert Pfade mit Pfaden in der Umgebung
    • Fragen Sie den tatsächlichen Pfad des Moduls über Module._findPath
    ab 🎜return Module._resolveFilename(request, parent, isMain);🎜🎜🎜🎜

    Module._resolveFilename = function(request, parent, isMain, options) {
      if (NativeModule.canBeRequiredByUsers(request)) { //是否为内置模块
        return request;
      }
    
      let paths;
      // 让paths和环境变量中的paths结合
      paths = Module._resolveLookupPaths(request, parent); //核心代码
      
      if (parent && parent.filename) {
        // 读取filename对应的package.json文件，看是否有exports字段，当前filename = false
        const filename = trySelf(parent.filename, request);
        if (filename) { //false
          const cacheKey = request + '\x00' +
              (paths.length === 1 ? paths[0] : paths.join('\x00'));
          Module._pathCache[cacheKey] = filename;
          return filename;
        }
      }
    
     //关键代码，找到本地执行文件 // Look up the filename first, since that's the cache key. 
      const filename = Module._findPath(request, paths, isMain, false);
      if (filename) return filename;
      // ...
    };

    Module._resolveLookupPahts方法

    • 生成要查找模块的所有路径上可能存在node_modules的路径数组
    • require.resolve.paths("yargs")核心实现方法

    生成

    [
      '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/bin/node_modules',
      '/Users/rainbow/Documents/前端/脚手架开发/rainbow-test/node_modules',
      '/Users/rainbow/Documents/前端/脚手架开发/node_modules',
      '/Users/rainbow/Documents/前端/node_modules',
      '/Users/rainbow/Documents/node_modules',
      '/Users/rainbow/node_modules',
      '/Users/node_modules',
      '/node_modules',
      '/Users/rainbow/.node_modules',
      '/Users/rainbow/.node_libraries',
      '/usr/local/Cellar/node/14.3.0_1/lib/node'
    ]

    

    Module._resolveLookupPaths = function(request, parent) {
      if (NativeModule.canBeRequiredByUsers(request)) {
        debug('looking for %j in []', request);
        return null;
      }
    
      // Check for node modules paths.
      if (request.charAt(0) !== '.' ||
          (request.length > 1 &&
          request.charAt(1) !== '.' &&
          request.charAt(1) !== '/' &&
          (!isWindows || request.charAt(1) !== '\'))){
         let paths = modulePaths;
         if (parent != null && parent.paths && parent.paths.length) {
          paths = parent.paths.concat(paths);
        }
    
        debug('looking for %j in %j', request, paths);
        return paths.length > 0 ? paths : null;
      }
      
      // In REPL, parent.filename is null.
      if (!parent || !parent.id || !parent.filename) {
        // Make require('./path/to/foo') work - normally the path is taken
        // from realpath(__filename) but in REPL there is no filename
        const mainPaths = ['.'];
    
        debug('looking for %j in %j', request, mainPaths);
        return mainPaths;
      }
    
      debug('RELATIVE: requested: %s from parent.id %s', request, parent.id);
    
      const parentDir = [path.dirname(parent.filename)];
      debug('looking for %j', parentDir);
      return parentDir;
    };

    Module._findPath核心流程

    • 查询缓存(将request和paths通过\x00合并生成cacheKey)(\x00是空格的16进制)
    • 遍历Module._resolveLookupPahts方法生成的paths数组，将path与request组成文件路径basePath
    • 如果basePath存在则调用fs.realPahtSync获取文件的真实路径

    

    fs.realPahtSync

    

    更多node相关知识，请访问：nodejs 教程！！

    Das obige ist der detaillierte Inhalt vonEin Artikel über die Modulpfadanalyse in Node.js. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!