web-dev-qa-db-ja.com

Golangでファイルシステムスキャンを実行する方法

  1. フォルダーのパスを指定すると、そのフォルダーをルートとするファイルをスキャンする関数を作成する必要があります。
  2. そして、そのフォルダのディレクトリ構造を表示する必要があります。

2の実行方法を知っています(jstreeを使用してブラウザーに表示します)。

そのような関数をgoで何をどこから書き始めるかなど、パート1で私を助けてください。

97
chinmay

[〜#〜] edit [〜#〜]:まだ十分な人がこの答えを見つけたので、Go1 API向けに更新すると思いました。これは filepath.Walk() の動作例です。オリジナルは以下です。

package main

import (
  "path/filepath"
  "os"
  "flag"
  "fmt"
)

func visit(path string, f os.FileInfo, err error) error {
  fmt.Printf("Visited: %s\n", path)
  return nil
} 


func main() {
  flag.Parse()
  root := flag.Arg(0)
  err := filepath.Walk(root, visit)
  fmt.Printf("filepath.Walk() returned %v\n", err)
}

Filepath.Walkは再帰的にディレクトリツリーを歩くことに注意してください。

これは実行例です:

$ mkdir -p dir1/dir2
$ touch dir1/file1 dir1/dir2/file2
$ go run walk.go dir1
Visited: dir1
Visited: dir1/dir2
Visited: dir1/dir2/file2
Visited: dir1/file1
filepath.Walk() returned <nil>

元の回答者のフォロー:ファイルパスをウォークするためのインターフェイスは、weekly.2011-09-16から変更されました。 http:// groupsを参照) .google.com/group/golang-nuts/msg/e304dd9cf196a218 以下のコードは、近い将来、GOのリリースバージョンでは機能しません。

実際には、標準ライブラリにはこれのための関数があります: filepath.Walk

package main

import (
    "path/filepath"
    "os"
    "flag"
)

type visitor int

// THIS CODE NO LONGER WORKS, PLEASE SEE ABOVE
func (v visitor) VisitDir(path string, f *os.FileInfo) bool {
    println(path)
    return true
} 

func (v visitor) VisitFile(path string, f *os.FileInfo) {
    println(path)
}

func main() {
    root := flag.Arg(0)
    filepath.Walk(root, visitor(0), nil)
}
189
laslowh

ディレクトリ内のファイルのファイル情報を取得する方法を次に示します。

package main

import (
    "fmt"
    "os"
    "path/filepath"
)

func main() {
    dirname := "." + string(filepath.Separator)
    d, err := os.Open(dirname)
    if err != nil {
        fmt.Println(err)
        os.Exit(1)
    }
    defer d.Close()
    fi, err := d.Readdir(-1)
    if err != nil {
        fmt.Println(err)
        os.Exit(1)
    }
    for _, fi := range fi {
        if fi.Mode().IsRegular() {
            fmt.Println(fi.Name(), fi.Size(), "bytes")
        }
    }
}
15
peterSO

すべてのファイルとディレクトリを再帰的にループする例を次に示します。追加するパスがディレクトリかどうかを知りたい場合は、「f.IsDir()」をチェックしてください。

package main

import (
    "fmt"
    "os"
    "path/filepath"
)

func main() {
    searchDir := "c:/path/to/dir"

    fileList := []string{}
    err := filepath.Walk(searchDir, func(path string, f os.FileInfo, err error) error {
        fileList = append(fileList, path)
        return nil
    })

    for _, file := range fileList {
        fmt.Println(file)
    }
}
12
Francois

パッケージ - github.com/kr/fs は、Walkerに非常に興味深いAPIを提供します。

7
Mostafa

Go標準パッケージioutilは、このケースシナリオのための機能を組み込みました。以下の例を参照してください

func searchFiles(dir string) { // dir is the parent directory you what to search
    files, err := ioutil.ReadDir(dir)
    if err != nil {
        log.Fatal(err)
    }

    for _, file := range files {
        fmt.Println(file.Name())
    }
}
4

「ウォークはシンボリックリンクをたどらない」ことに注意してください。したがって、それを行う関数を作成する場合は、 ioutil.ReadDir をお勧めします。私自身のベンチマークテストでは、 filepath.Glob よりも高速でメモリ集約度が低いことが示されました。

さらに、ioutil.ReadDirは、基本的な文字列比較(strA > strB)。 devopsの男として、私は通常、逆の数値比較(たとえば、最新のビルドを最初に行う)を行うことにより、ディレクトリ名をソートします。それがあなたの場合でもある場合は、 os.ReadDir を直接呼び出すことをお勧めします(ioutil.ReadDirはカバーの下でこれを呼び出しています)、自分でソートを行います。

以下は、数値ソートによるReadDir部分の例です。

// ReadDirNumSort - Same as ioutil/ReadDir but uses returns a Numerically
// Sorted file list.
//
// Taken from https://golang.org/src/io/ioutil/ioutil.go
// Copyright 2009 The Go Authors. All rights reserved.
// Use of this source code is governed by a BSD-style
// license that can be found in the LICENSE file.
//
// Modified Sort method to use Numerically sorted names instead.
// It also allows reverse sorting.
func ReadDirNumSort(dirname string, reverse bool) ([]os.FileInfo, error) {
    f, err := os.Open(dirname)
    if err != nil {
        return nil, err
    }
    list, err := f.Readdir(-1)
    f.Close()
    if err != nil {
        return nil, err
    }
    if reverse {
        sort.Sort(sort.Reverse(byName(list)))
    } else {
        sort.Sort(byName(list))
    }
    return list, nil
}

// byName implements sort.Interface.
type byName []os.FileInfo

func (f byName) Len() int      { return len(f) }
func (f byName) Swap(i, j int) { f[i], f[j] = f[j], f[i] }
func (f byName) Less(i, j int) bool {
    nai, err := strconv.Atoi(f[i].Name())
    if err != nil {
        return f[i].Name() < f[j].Name()
    }
    naj, err := strconv.Atoi(f[j].Name())
    if err != nil {
        return f[i].Name() < f[j].Name()
    }
    return nai < naj
}
1
DavidG

https://github.com/030/go-find

package main

import (
    "log"

    find "github.com/030/go-find/find"
)

func main() {
    path, err := find.File("/home/user/go/src/github.com/030", "find.go")
    if err != nil {
        log.Fatal(err)
    }
}

返却値

/home/user/go/src/github.com/030/go-find/find/find.go
0
030