mirror of
https://github.com/sbrow/envr.git
synced 2026-06-27 18:48:33 -04:00
Compare commits
42 Commits
main
...
623c2f5f29
| Author | SHA1 | Date | |
|---|---|---|---|
| 623c2f5f29 | |||
| 5ea760a7fa | |||
| c5d578dd1b | |||
| a4417affa1 | |||
| b47ca8f14d | |||
| e6f09a037b | |||
| 46c2baf726 | |||
| a56d349da4 | |||
| 2229affe69 | |||
| 6394c42d8b | |||
| 8e00c78f12 | |||
| 8d2c5403e8 | |||
| 7c7d3d5c23 | |||
| 6151a5efaf | |||
| fbb1f86945 | |||
| 0c5aa74256 | |||
| eed360895f | |||
| 75b778453f | |||
| 4ec2b22b52 | |||
| 0276db767e | |||
| a0e2c99581 | |||
| d0dc93ab56 | |||
| 91ada61c06 | |||
| 9b39567720 | |||
| 43dd8aca13 | |||
| db1b863e7e | |||
| e966050137 | |||
| 7629dd2ce7 | |||
| 7c7ddf46f6 | |||
| a1e945a630 | |||
| 0a332adfdf | |||
| 4e1e359076 | |||
| 82bec68bd1 | |||
| 2cb6067a3a | |||
| 3668df57d1 | |||
| d2127e4780 | |||
| cb7db96781 | |||
| c92155a17b | |||
| b1d2416182 | |||
| 40f0b3c36d | |||
| d84e43d044 | |||
| 28f96df4c0 |
1
.github/workflows/release-please.yml
vendored
1
.github/workflows/release-please.yml
vendored
@@ -25,4 +25,3 @@ jobs:
|
|||||||
# this is a built-in strategy in release-please, see "Action Inputs"
|
# this is a built-in strategy in release-please, see "Action Inputs"
|
||||||
# for more options
|
# for more options
|
||||||
release-type: simple
|
release-type: simple
|
||||||
target-branch: ${{ github.ref_name }}
|
|
||||||
|
|||||||
4
.gitignore
vendored
4
.gitignore
vendored
@@ -7,12 +7,8 @@ list.json
|
|||||||
man
|
man
|
||||||
|
|
||||||
# build artifacts
|
# build artifacts
|
||||||
*.spall
|
|
||||||
builds
|
builds
|
||||||
envr
|
envr
|
||||||
envr-go
|
envr-go
|
||||||
findr/findr
|
|
||||||
findr/findr-prof
|
|
||||||
findr/bench-*.md
|
|
||||||
result
|
result
|
||||||
version.odin
|
version.odin
|
||||||
|
|||||||
22
CHANGELOG.md
22
CHANGELOG.md
@@ -1,27 +1,5 @@
|
|||||||
# Changelog
|
# Changelog
|
||||||
|
|
||||||
## [0.3.0](https://github.com/sbrow/envr/compare/v0.2.1...v0.3.0) (2026-06-16)
|
|
||||||
|
|
||||||
Version 0.3.0 represents a significant departure (and improvement) for envr.
|
|
||||||
The entire codebase was rewritten in [Odin](https://odin-lang.org/) (from Go).
|
|
||||||
This reduced the binary size from over 17MB to under 600k, improved performance,
|
|
||||||
and significantly reduced the number of project dependencies from 69 to just 2.
|
|
||||||
|
|
||||||
### ⚠ BREAKING CHANGES
|
|
||||||
|
|
||||||
* The encryption format of databases has changed. Age encryption is no longer supported, and no automatic migration path was implemented.
|
|
||||||
|
|
||||||
### Features
|
|
||||||
|
|
||||||
* All encryption/decryption now happens in-memory. ([fe2b256](https://github.com/sbrow/envr/commit/fe2b256bd61eaf551d53faf3893b473a64a94667))
|
|
||||||
* Config can be loaded from any path with `--config-file (-c)` flag. ([4a26ee8](https://github.com/sbrow/envr/commit/4a26ee814591e6aab0eb99d2359d51b31011edfe))
|
|
||||||
* Switched from age to libsodium. ([23b8c2d](https://github.com/sbrow/envr/commit/23b8c2dc671a23cf76cf6746b33806ded9381486))
|
|
||||||
|
|
||||||
|
|
||||||
### Performance Improvements
|
|
||||||
|
|
||||||
* Improved writer performance. ([365e914](https://github.com/sbrow/envr/commit/365e9149b1a738ac9119bb5f74dc7e047ecfed5b))
|
|
||||||
|
|
||||||
## [0.2.1](https://github.com/sbrow/envr/compare/v0.2.0...v0.2.1) (2026-01-12)
|
## [0.2.1](https://github.com/sbrow/envr/compare/v0.2.0...v0.2.1) (2026-01-12)
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
22
TODOS.md
22
TODOS.md
@@ -1,6 +1,12 @@
|
|||||||
# TODOs
|
# TODO
|
||||||
|
|
||||||
1. Consider giving db its own allocator
|
Note: These todos can wait until all the subcommands have been ported.
|
||||||
|
|
||||||
|
## HIGH
|
||||||
|
|
||||||
|
1. **db.odin:380-383, 405, 446** — `sqlite.bind_text` return values overwritten but never checked. A failed bind means `sqlite.step` operates on unbound params.
|
||||||
|
|
||||||
|
## MEDIUM
|
||||||
|
|
||||||
2. **db.odin:324-327** — Map iteration (`remote_set`) is non-deterministic. Same file can produce different JSON on each backup, causing spurious DB diffs. Sort remotes before storing.
|
2. **db.odin:324-327** — Map iteration (`remote_set`) is non-deterministic. Same file can produce different JSON on each backup, causing spurious DB diffs. Sort remotes before storing.
|
||||||
|
|
||||||
@@ -12,14 +18,22 @@
|
|||||||
|
|
||||||
6. **cmd_restore.odin:44** — `os.mkdir_all` error silently discarded. Subsequent write failure will be confusing.
|
6. **cmd_restore.odin:44** — `os.mkdir_all` error silently discarded. Subsequent write failure will be confusing.
|
||||||
|
|
||||||
|
7. **cmd_edit_config.odin:27** — `$EDITOR` used as single binary name. Breaks for multi-word values like `"code -w"`. Needs `strings.fields()`.
|
||||||
|
|
||||||
8. **config.odin:178** — `search_paths` silently ignores `os.user_home_dir` error. If home is empty, `~` isn't expanded. Same class of bug as issue 3.
|
8. **config.odin:178** — `search_paths` silently ignores `os.user_home_dir` error. If home is empty, `~` isn't expanded. Same class of bug as issue 3.
|
||||||
|
|
||||||
|
9. **prompt.odin:124** — `make([dynamic]bool, len(options))` creates N zero-initialized elements. Works because `false` is the default, but same footgun as original issue 1. Should be `make([dynamic]bool, 0, len(options))`.
|
||||||
|
|
||||||
|
## LOW
|
||||||
|
|
||||||
10. **db.odin:115** — `json.unmarshal_string` error not checked. Malformed JSON silently produces empty/partial data.
|
10. **db.odin:115** — `json.unmarshal_string` error not checked. Malformed JSON silently produces empty/partial data.
|
||||||
|
|
||||||
11. **db.odin:352-353** — `hex.encode` error ignored. `string(hex_bytes)` aliases the byte slice.
|
11. **db.odin:352-353** — `hex.encode` error ignored. `string(hex_bytes)` aliases the byte slice.
|
||||||
|
|
||||||
12. **cmd_sync.odin:80, cmd_list.odin:33, cmd_deps.odin:9** — `make([]string, 2)` for table rows never freed. Leaks per row. Defer to memory pass.
|
12. **cmd_sync.odin:80, cmd_list.odin:33, cmd_deps.odin:9** — `make([]string, 2)` for table rows never freed. Leaks per row. Defer to memory pass.
|
||||||
|
|
||||||
|
## REFACTOR
|
||||||
|
|
||||||
13. **cmd_list.odin** — Non-TTY branch builds `ListEntry` structs and marshals JSON separately. Now that `render_json_rows` (issue 1) accepts an `io.Writer` and uses `json.marshal`, unify both branches to use it. Note: will change JSON keys from `"directory"/"path"` to `"Directory"/"Path"`.
|
13. **cmd_list.odin** — Non-TTY branch builds `ListEntry` structs and marshals JSON separately. Now that `render_json_rows` (issue 1) accepts an `io.Writer` and uses `json.marshal`, unify both branches to use it. Note: will change JSON keys from `"directory"/"path"` to `"Directory"/"Path"`.
|
||||||
|
|
||||||
14. Check for prealloc opportunities. i.e. `make([dynamic]string)` -> `make([dynamic]string, 5)`.
|
14. Check for prealloc opportunities. i.e. `make([dynamic]string)` -> `make([dynamic]string, 5)`.
|
||||||
@@ -32,14 +46,14 @@
|
|||||||
|
|
||||||
18. 2 scan tests silently skip when fd isn't installed, tests pass without actually testing anything. These should use #assert to be sure that fd is in path.
|
18. 2 scan tests silently skip when fd isn't installed, tests pass without actually testing anything. These should use #assert to be sure that fd is in path.
|
||||||
|
|
||||||
|
19. Try to do all encryption / decryption in memory - only read / write encrypted data to disk.
|
||||||
|
|
||||||
20. add --format -f flag to commands that draw tables.
|
20. add --format -f flag to commands that draw tables.
|
||||||
|
|
||||||
21. Replace `testing.expect` calls with `testing.expect_value` calls where appropriate.
|
21. Replace `testing.expect` calls with `testing.expect_value` calls where appropriate.
|
||||||
|
|
||||||
22. Change struct field names from PascalCase to snake_case.
|
22. Change struct field names from PascalCase to snake_case.
|
||||||
|
|
||||||
23. procedures should be ordered by use, main at the top, then in the order they are called from main.
|
|
||||||
|
|
||||||
## Double-check AI output
|
## Double-check AI output
|
||||||
|
|
||||||
- [ ] cli.odin
|
- [ ] cli.odin
|
||||||
|
|||||||
@@ -5,6 +5,8 @@ import "core:os"
|
|||||||
import "core:path/filepath"
|
import "core:path/filepath"
|
||||||
|
|
||||||
cmd_check :: proc(cmd: ^Command) {
|
cmd_check :: proc(cmd: ^Command) {
|
||||||
|
feats := check_features()
|
||||||
|
|
||||||
check_path: string
|
check_path: string
|
||||||
if len(cmd.args) > 0 {
|
if len(cmd.args) > 0 {
|
||||||
check_path = cmd.args[0]
|
check_path = cmd.args[0]
|
||||||
@@ -40,6 +42,15 @@ cmd_check :: proc(cmd: ^Command) {
|
|||||||
files_in_path: [dynamic]string
|
files_in_path: [dynamic]string
|
||||||
|
|
||||||
if is_dir {
|
if is_dir {
|
||||||
|
if cant_scan(feats) {
|
||||||
|
fmt.wprintln(
|
||||||
|
cmd.err,
|
||||||
|
"Error: please install fd to use the check command (https://github.com/sharkdp/fd)",
|
||||||
|
flush = false,
|
||||||
|
)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
scanned, scan_ok := scan_path(abs_path, db.cfg)
|
scanned, scan_ok := scan_path(abs_path, db.cfg)
|
||||||
if !scan_ok {
|
if !scan_ok {
|
||||||
fmt.wprintln(cmd.err, "Error scanning directory for .env files", flush = false)
|
fmt.wprintln(cmd.err, "Error scanning directory for .env files", flush = false)
|
||||||
|
|||||||
@@ -17,6 +17,12 @@ cmd_deps :: proc(cmd: ^Command) {
|
|||||||
append(&rows, []string{"Git", "\u2717 Missing"})
|
append(&rows, []string{"Git", "\u2717 Missing"})
|
||||||
}
|
}
|
||||||
|
|
||||||
|
if .Fd in feats {
|
||||||
|
append(&rows, []string{"fd", "\u2713 Available"})
|
||||||
|
} else {
|
||||||
|
append(&rows, []string{"fd", "\u2717 Missing"})
|
||||||
|
}
|
||||||
|
|
||||||
if terminal.is_terminal(os.stdout) {
|
if terminal.is_terminal(os.stdout) {
|
||||||
render_table(cmd.out, headers, rows[:])
|
render_table(cmd.out, headers, rows[:])
|
||||||
} else {
|
} else {
|
||||||
|
|||||||
@@ -6,6 +6,16 @@ import "core:os"
|
|||||||
import "core:terminal"
|
import "core:terminal"
|
||||||
|
|
||||||
cmd_scan :: proc(cmd: ^Command) {
|
cmd_scan :: proc(cmd: ^Command) {
|
||||||
|
feats := check_features()
|
||||||
|
if cant_scan(feats) {
|
||||||
|
fmt.wprintln(
|
||||||
|
cmd.err,
|
||||||
|
"Error: please install fd to use the scan command (https://github.com/sharkdp/fd)",
|
||||||
|
flush = false,
|
||||||
|
)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
db, db_ok := db_open(cmd.config_path)
|
db, db_ok := db_open(cmd.config_path)
|
||||||
if !db_ok {
|
if !db_ok {
|
||||||
return
|
return
|
||||||
|
|||||||
22
config.odin
22
config.odin
@@ -6,8 +6,6 @@ import "core:os"
|
|||||||
import "core:path/filepath"
|
import "core:path/filepath"
|
||||||
import "core:strings"
|
import "core:strings"
|
||||||
|
|
||||||
import "findr"
|
|
||||||
|
|
||||||
SshKeyPair :: struct {
|
SshKeyPair :: struct {
|
||||||
Private: string `json:"private"`,
|
Private: string `json:"private"`,
|
||||||
Public: string `json:"public"`,
|
Public: string `json:"public"`,
|
||||||
@@ -77,7 +75,7 @@ envr_dir :: proc(config_path: string) -> string {
|
|||||||
return filepath.dir(config_path)
|
return filepath.dir(config_path)
|
||||||
}
|
}
|
||||||
|
|
||||||
data_path :: proc(config_path: string) -> string {
|
data_encrypted_path :: proc(config_path: string) -> string {
|
||||||
path, _ := filepath.join([]string{envr_dir(config_path), "data.envr"})
|
path, _ := filepath.join([]string{envr_dir(config_path), "data.envr"})
|
||||||
return path
|
return path
|
||||||
}
|
}
|
||||||
@@ -128,7 +126,6 @@ find_ssh_private_keys :: proc() -> (keys: [dynamic]string, ok: bool) {
|
|||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
// Caller is responsible for calling delete_config()
|
|
||||||
new_config :: proc(
|
new_config :: proc(
|
||||||
private_key_paths: []string,
|
private_key_paths: []string,
|
||||||
cfg_path: string = "~/.envr/config.json",
|
cfg_path: string = "~/.envr/config.json",
|
||||||
@@ -220,7 +217,22 @@ search_paths :: proc(cfg: Config) -> (paths: [dynamic]string) {
|
|||||||
|
|
||||||
find_git_roots :: proc(cfg: Config) -> (roots: [dynamic]string, ok: bool) {
|
find_git_roots :: proc(cfg: Config) -> (roots: [dynamic]string, ok: bool) {
|
||||||
paths := search_paths(cfg)
|
paths := search_paths(cfg)
|
||||||
findr.find_repos(paths[:], &roots, os.get_processor_core_count())
|
|
||||||
|
for sp in paths {
|
||||||
|
args := []string{"fd", "-H", "-t", "d", "^\\.git$", sp}
|
||||||
|
lines, fd_ok := run_fd(args)
|
||||||
|
if !fd_ok {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
for line in lines {
|
||||||
|
cleaned, _ := filepath.clean(line)
|
||||||
|
parent := filepath.dir(cleaned)
|
||||||
|
cloned, _ := strings.clone(parent)
|
||||||
|
append(&roots, cloned)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
ok = true
|
ok = true
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|||||||
@@ -163,8 +163,8 @@ test_envr_dir :: proc(t: ^testing.T) {
|
|||||||
}
|
}
|
||||||
|
|
||||||
@(test)
|
@(test)
|
||||||
test_data_path :: proc(t: ^testing.T) {
|
test_data_encrypted_path :: proc(t: ^testing.T) {
|
||||||
p := data_path("/tmp/envr-fake-home-datapath/config.json")
|
p := data_encrypted_path("/tmp/envr-fake-home-datapath/config.json")
|
||||||
defer delete(p)
|
defer delete(p)
|
||||||
testing.expectf(t, strings.has_suffix(p, "data.envr"), "should end with data.envr, got %s", p)
|
testing.expectf(t, strings.has_suffix(p, "data.envr"), "should end with data.envr, got %s", p)
|
||||||
testing.expectf(t, strings.contains(p, ".envr"), "should contain .envr dir, got %s", p)
|
testing.expectf(t, strings.contains(p, ".envr"), "should contain .envr dir, got %s", p)
|
||||||
|
|||||||
127
db.odin
127
db.odin
@@ -66,7 +66,7 @@ db_open :: proc(cfg_path: string) -> (Db, bool) {
|
|||||||
return Db{}, false
|
return Db{}, false
|
||||||
}
|
}
|
||||||
|
|
||||||
data_path := data_path(cfg.config_path)
|
data_path := data_encrypted_path(cfg.config_path)
|
||||||
_, stat_err := os.stat(data_path, context.allocator)
|
_, stat_err := os.stat(data_path, context.allocator)
|
||||||
|
|
||||||
db: ^rawptr
|
db: ^rawptr
|
||||||
@@ -95,31 +95,32 @@ db_open :: proc(cfg_path: string) -> (Db, bool) {
|
|||||||
}
|
}
|
||||||
|
|
||||||
db_close :: proc(d: ^Db) {
|
db_close :: proc(d: ^Db) {
|
||||||
defer sqlite.db_close(d.db)
|
|
||||||
|
|
||||||
if d.changed {
|
if d.changed {
|
||||||
rc := sqlite.db_exec(d.db, "VACUUM", nil, nil, nil)
|
tmp_path := make_temp_path()
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error vacuuming database: %s\n", sqlite.db_errmsg(d.db))
|
if !db_vacuum_to_file(d.db, tmp_path) {
|
||||||
|
os.remove(tmp_path)
|
||||||
|
sqlite.db_close(d.db)
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
sz: i64
|
sqlite_data, read_err := os.read_entire_file_from_path(tmp_path, context.allocator)
|
||||||
data := sqlite.serialize(d.db, "main", &sz, 0)
|
os.remove(tmp_path)
|
||||||
if data == nil {
|
if read_err != nil {
|
||||||
fmt.println("Error: failed to serialize database")
|
fmt.printf("Error reading vacuumed database: %v\n", read_err)
|
||||||
|
sqlite.db_close(d.db)
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
defer sqlite.free(data)
|
|
||||||
|
|
||||||
sqlite_data := data[:sz]
|
|
||||||
encrypted, enc_ok := encrypt(sqlite_data, d.cfg.Keys[:])
|
encrypted, enc_ok := encrypt(sqlite_data, d.cfg.Keys[:])
|
||||||
|
delete(sqlite_data)
|
||||||
if !enc_ok {
|
if !enc_ok {
|
||||||
fmt.println("Error: encryption failed")
|
fmt.println("Error: encryption failed")
|
||||||
|
sqlite.db_close(d.db)
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
data_path := data_path(d.cfg.config_path)
|
data_path := data_encrypted_path(d.cfg.config_path)
|
||||||
envr_d := envr_dir(d.cfg.config_path)
|
envr_d := envr_dir(d.cfg.config_path)
|
||||||
os.mkdir_all(envr_d)
|
os.mkdir_all(envr_d)
|
||||||
|
|
||||||
@@ -127,11 +128,13 @@ db_close :: proc(d: ^Db) {
|
|||||||
delete(encrypted)
|
delete(encrypted)
|
||||||
if write_err != nil {
|
if write_err != nil {
|
||||||
fmt.printf("Error writing encrypted database: %v\n", write_err)
|
fmt.printf("Error writing encrypted database: %v\n", write_err)
|
||||||
|
sqlite.db_close(d.db)
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
d.changed = false
|
d.changed = false
|
||||||
}
|
}
|
||||||
|
sqlite.db_close(d.db)
|
||||||
}
|
}
|
||||||
|
|
||||||
// Caller is responsible for calling:
|
// Caller is responsible for calling:
|
||||||
@@ -189,12 +192,22 @@ db_list :: proc(d: ^Db, allocator := context.allocator) -> (results: [dynamic]En
|
|||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
|
db_vacuum_to_file :: proc(db: ^rawptr, path: string) -> bool {
|
||||||
|
b: strings.Builder
|
||||||
|
strings.builder_init(&b)
|
||||||
|
defer strings.builder_destroy(&b)
|
||||||
|
fmt.sbprintf(&b, "VACUUM INTO '%s'", path)
|
||||||
|
rc := sqlite.db_exec(db, to_cstring(&b), nil, nil, nil)
|
||||||
|
if rc != sqlite.OK {
|
||||||
|
fmt.printf("Error vacuuming database: %s\n", sqlite.db_errmsg(db))
|
||||||
|
return false
|
||||||
|
}
|
||||||
|
return true
|
||||||
|
}
|
||||||
|
|
||||||
db_restore_from_encrypted :: proc(db: ^rawptr, cfg: Config) -> bool {
|
db_restore_from_encrypted :: proc(db: ^rawptr, cfg: Config) -> bool {
|
||||||
encrypted_data, read_err := os.read_entire_file_from_path(
|
data_path := data_encrypted_path(cfg.config_path)
|
||||||
data_path(cfg.config_path),
|
encrypted_data, read_err := os.read_entire_file_from_path(data_path, context.temp_allocator)
|
||||||
context.allocator,
|
|
||||||
)
|
|
||||||
defer delete(encrypted_data)
|
|
||||||
if read_err != nil {
|
if read_err != nil {
|
||||||
fmt.printf("Error reading encrypted database: %v\n", read_err)
|
fmt.printf("Error reading encrypted database: %v\n", read_err)
|
||||||
return false
|
return false
|
||||||
@@ -207,31 +220,49 @@ db_restore_from_encrypted :: proc(db: ^rawptr, cfg: Config) -> bool {
|
|||||||
}
|
}
|
||||||
defer delete(plaintext)
|
defer delete(plaintext)
|
||||||
|
|
||||||
n := i64(len(plaintext))
|
tmp_path := make_temp_path()
|
||||||
buf := sqlite.malloc64(n)
|
write_err := os.write_entire_file(tmp_path, plaintext)
|
||||||
if buf == nil {
|
if write_err != nil {
|
||||||
fmt.println("Error: failed to allocate buffer for deserialization")
|
fmt.printf("Error writing temp database: %v\n", write_err)
|
||||||
return false
|
return false
|
||||||
}
|
}
|
||||||
copy(buf[:len(plaintext)], plaintext)
|
defer os.remove(tmp_path)
|
||||||
|
|
||||||
rc := sqlite.deserialize(
|
if !db_attach_and_copy(db, tmp_path) {
|
||||||
db,
|
|
||||||
"main",
|
|
||||||
buf,
|
|
||||||
n,
|
|
||||||
n,
|
|
||||||
sqlite.DESERIALIZE_FREEONCLOSE | sqlite.DESERIALIZE_RESIZEABLE,
|
|
||||||
)
|
|
||||||
if rc != sqlite.OK {
|
|
||||||
sqlite.free(buf)
|
|
||||||
fmt.printf("Error deserializing database: %s\n", sqlite.db_errmsg(db))
|
|
||||||
return false
|
return false
|
||||||
}
|
}
|
||||||
|
|
||||||
return true
|
return true
|
||||||
}
|
}
|
||||||
|
|
||||||
|
db_attach_and_copy :: proc(mem_db: ^rawptr, src_path: string) -> bool {
|
||||||
|
b: strings.Builder
|
||||||
|
strings.builder_init(&b)
|
||||||
|
defer strings.builder_destroy(&b)
|
||||||
|
fmt.sbprintf(&b, "ATTACH DATABASE '%s' AS source", src_path)
|
||||||
|
|
||||||
|
rc := sqlite.db_exec(mem_db, to_cstring(&b), nil, nil, nil)
|
||||||
|
if rc != sqlite.OK {
|
||||||
|
fmt.printf("Error attaching database: %s\n", sqlite.db_errmsg(mem_db))
|
||||||
|
return false
|
||||||
|
}
|
||||||
|
|
||||||
|
rc = sqlite.db_exec(
|
||||||
|
mem_db,
|
||||||
|
"INSERT INTO main.envr_env_files SELECT * FROM source.envr_env_files",
|
||||||
|
nil,
|
||||||
|
nil,
|
||||||
|
nil,
|
||||||
|
)
|
||||||
|
if rc != sqlite.OK {
|
||||||
|
fmt.printf("Error copying data: %s\n", sqlite.db_errmsg(mem_db))
|
||||||
|
sqlite.db_exec(mem_db, "DETACH DATABASE source", nil, nil, nil)
|
||||||
|
return false
|
||||||
|
}
|
||||||
|
|
||||||
|
sqlite.db_exec(mem_db, "DETACH DATABASE source", nil, nil, nil)
|
||||||
|
return true
|
||||||
|
}
|
||||||
|
|
||||||
get_git_remotes :: proc(dir: string) -> [dynamic]string {
|
get_git_remotes :: proc(dir: string) -> [dynamic]string {
|
||||||
remotes: [dynamic]string
|
remotes: [dynamic]string
|
||||||
@@ -351,34 +382,18 @@ db_insert :: proc(d: ^Db, file: EnvFile) -> bool {
|
|||||||
cpath := to_cstring(file.Path)
|
cpath := to_cstring(file.Path)
|
||||||
defer delete(cpath)
|
defer delete(cpath)
|
||||||
rc = sqlite.bind_text(stmt, 1, cpath, -1, nil)
|
rc = sqlite.bind_text(stmt, 1, cpath, -1, nil)
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error binding path: %s\n", sqlite.db_errmsg(d.db))
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
cremotes := to_cstring(string(remotes_json))
|
cremotes := to_cstring(string(remotes_json))
|
||||||
defer delete(cremotes)
|
defer delete(cremotes)
|
||||||
rc = sqlite.bind_text(stmt, 2, cremotes, -1, nil)
|
rc = sqlite.bind_text(stmt, 2, cremotes, -1, nil)
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error binding remotes: %s\n", sqlite.db_errmsg(d.db))
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
csha := to_cstring(file.Sha256)
|
csha := to_cstring(file.Sha256)
|
||||||
defer delete(csha)
|
defer delete(csha)
|
||||||
rc = sqlite.bind_text(stmt, 3, csha, -1, nil)
|
rc = sqlite.bind_text(stmt, 3, csha, -1, nil)
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error binding sha256: %s\n", sqlite.db_errmsg(d.db))
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
ccontents := to_cstring(file.contents)
|
ccontents := to_cstring(file.contents)
|
||||||
defer delete(ccontents)
|
defer delete(ccontents)
|
||||||
rc = sqlite.bind_text(stmt, 4, ccontents, -1, nil)
|
rc = sqlite.bind_text(stmt, 4, ccontents, -1, nil)
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error binding contents: %s\n", sqlite.db_errmsg(d.db))
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
rc = sqlite.step(stmt)
|
rc = sqlite.step(stmt)
|
||||||
if rc != sqlite.DONE {
|
if rc != sqlite.DONE {
|
||||||
@@ -403,10 +418,6 @@ db_fetch :: proc(d: ^Db, path: string, allocator := context.allocator) -> (EnvFi
|
|||||||
cpath := to_cstring(path, allocator)
|
cpath := to_cstring(path, allocator)
|
||||||
defer delete(cpath, allocator)
|
defer delete(cpath, allocator)
|
||||||
rc = sqlite.bind_text(stmt, 1, cpath, -1, nil)
|
rc = sqlite.bind_text(stmt, 1, cpath, -1, nil)
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error binding path: %s\n", sqlite.db_errmsg(d.db))
|
|
||||||
return EnvFile{}, false
|
|
||||||
}
|
|
||||||
rc = sqlite.step(stmt)
|
rc = sqlite.step(stmt)
|
||||||
if rc == sqlite.DONE {
|
if rc == sqlite.DONE {
|
||||||
fmt.printf("No file found with path: %s\n", path)
|
fmt.printf("No file found with path: %s\n", path)
|
||||||
@@ -448,10 +459,6 @@ db_delete :: proc(d: ^Db, path: string) -> bool {
|
|||||||
cpath := to_cstring(path)
|
cpath := to_cstring(path)
|
||||||
defer delete(cpath)
|
defer delete(cpath)
|
||||||
rc = sqlite.bind_text(stmt, 1, cpath, -1, nil)
|
rc = sqlite.bind_text(stmt, 1, cpath, -1, nil)
|
||||||
if rc != sqlite.OK {
|
|
||||||
fmt.printf("Error binding path: %s\n", sqlite.db_errmsg(d.db))
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
rc = sqlite.step(stmt)
|
rc = sqlite.step(stmt)
|
||||||
if rc != sqlite.DONE {
|
if rc != sqlite.DONE {
|
||||||
fmt.printf("Error deleting: %s\n", sqlite.db_errmsg(d.db))
|
fmt.printf("Error deleting: %s\n", sqlite.db_errmsg(d.db))
|
||||||
@@ -517,8 +524,8 @@ update_dir :: proc(f: ^EnvFile, new_dir: string) {
|
|||||||
|
|
||||||
find_moved_dirs :: proc(d: ^Db, f: ^EnvFile) -> ([dynamic]string, bool) {
|
find_moved_dirs :: proc(d: ^Db, f: ^EnvFile) -> ([dynamic]string, bool) {
|
||||||
feats := check_features()
|
feats := check_features()
|
||||||
if .Git not_in feats {
|
if .Fd not_in feats || .Git not_in feats {
|
||||||
fmt.println("Error: git is required for moved dir detection")
|
fmt.println("Error: fd and git are required for moved dir detection")
|
||||||
return {}, false
|
return {}, false
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|||||||
@@ -136,7 +136,7 @@ test_encrypt_write_read_decrypt :: proc(t: ^testing.T) {
|
|||||||
}
|
}
|
||||||
|
|
||||||
@(test)
|
@(test)
|
||||||
test_decrypt_then_deserialize_sqlite :: proc(t: ^testing.T) {
|
test_decrypt_then_attach_sqlite :: proc(t: ^testing.T) {
|
||||||
cfg := fixture_config()
|
cfg := fixture_config()
|
||||||
defer {
|
defer {
|
||||||
delete(cfg.Keys)
|
delete(cfg.Keys)
|
||||||
@@ -164,6 +164,14 @@ test_decrypt_then_deserialize_sqlite :: proc(t: ^testing.T) {
|
|||||||
}
|
}
|
||||||
defer delete(plaintext)
|
defer delete(plaintext)
|
||||||
|
|
||||||
|
tmp_db_path := fmt.tprintf("/tmp/envr-test-attach-%d.db", os.get_pid())
|
||||||
|
write_err := os.write_entire_file(tmp_db_path, plaintext)
|
||||||
|
testing.expectf(t, write_err == nil, "failed to write temp db: %v", write_err)
|
||||||
|
if write_err != nil {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
defer os.remove(tmp_db_path)
|
||||||
|
|
||||||
mem_db: ^rawptr
|
mem_db: ^rawptr
|
||||||
rc := sqlite.db_open(":memory:", &mem_db)
|
rc := sqlite.db_open(":memory:", &mem_db)
|
||||||
testing.expectf(t, rc == sqlite.OK, "failed to open in-memory db")
|
testing.expectf(t, rc == sqlite.OK, "failed to open in-memory db")
|
||||||
@@ -172,25 +180,12 @@ test_decrypt_then_deserialize_sqlite :: proc(t: ^testing.T) {
|
|||||||
}
|
}
|
||||||
defer sqlite.db_close(mem_db)
|
defer sqlite.db_close(mem_db)
|
||||||
|
|
||||||
n := i64(len(plaintext))
|
create_sql: cstring = "CREATE TABLE IF NOT EXISTS envr_env_files (path TEXT PRIMARY KEY NOT NULL, remotes TEXT, sha256 TEXT NOT NULL, contents TEXT NOT NULL)"
|
||||||
buf := sqlite.malloc64(n)
|
rc = sqlite.db_exec(mem_db, create_sql, nil, nil, nil)
|
||||||
testing.expect(t, buf != nil, "malloc64 should succeed")
|
testing.expect(t, rc == sqlite.OK, "failed to create table")
|
||||||
if buf == nil do return
|
|
||||||
copy(buf[:len(plaintext)], plaintext)
|
|
||||||
|
|
||||||
rc = sqlite.deserialize(
|
attach_ok := db_attach_and_copy(mem_db, tmp_db_path)
|
||||||
mem_db,
|
testing.expect(t, attach_ok, "failed to attach and copy")
|
||||||
"main",
|
|
||||||
buf,
|
|
||||||
n,
|
|
||||||
n,
|
|
||||||
sqlite.DESERIALIZE_FREEONCLOSE | sqlite.DESERIALIZE_RESIZEABLE,
|
|
||||||
)
|
|
||||||
testing.expect(t, rc == sqlite.OK, "deserialize should succeed")
|
|
||||||
if rc != sqlite.OK {
|
|
||||||
sqlite.free(buf)
|
|
||||||
return
|
|
||||||
}
|
|
||||||
|
|
||||||
sql: cstring = "SELECT path FROM envr_env_files"
|
sql: cstring = "SELECT path FROM envr_env_files"
|
||||||
stmt: ^rawptr
|
stmt: ^rawptr
|
||||||
|
|||||||
21
db_test.odin
21
db_test.odin
@@ -215,7 +215,7 @@ test_db_delete_sets_changed :: proc(t: ^testing.T) {
|
|||||||
}
|
}
|
||||||
|
|
||||||
@(test)
|
@(test)
|
||||||
test_db_serialize :: proc(t: ^testing.T) {
|
test_db_vacuum_to_file :: proc(t: ^testing.T) {
|
||||||
d, ok := make_test_db()
|
d, ok := make_test_db()
|
||||||
testing.expect(t, ok, "failed to create test db")
|
testing.expect(t, ok, "failed to create test db")
|
||||||
if !ok do return
|
if !ok do return
|
||||||
@@ -225,13 +225,20 @@ test_db_serialize :: proc(t: ^testing.T) {
|
|||||||
defer delete(f.Remotes)
|
defer delete(f.Remotes)
|
||||||
db_insert(&d, f)
|
db_insert(&d, f)
|
||||||
|
|
||||||
sz: i64
|
vacuum_path := fmt.tprintf("/tmp/envr-test-vacuum-%d.db", os.get_pid())
|
||||||
data := sqlite.serialize(d.db, "main", &sz, 0)
|
defer os.remove(vacuum_path)
|
||||||
testing.expect(t, data != nil, "serialize should return non-nil")
|
|
||||||
if data == nil do return
|
|
||||||
defer sqlite.free(data)
|
|
||||||
|
|
||||||
testing.expect(t, sz > 0, "serialized size should be > 0")
|
testing.expect(t, db_vacuum_to_file(d.db, vacuum_path), "vacuum should succeed")
|
||||||
|
|
||||||
|
info, stat_err := os.stat(vacuum_path, context.allocator)
|
||||||
|
defer os.file_info_delete(info, context.allocator)
|
||||||
|
testing.expect(t, stat_err == nil, "vacuumed file should exist")
|
||||||
|
|
||||||
|
data, read_err := os.read_entire_file_from_path(vacuum_path, context.allocator)
|
||||||
|
testing.expect(t, read_err == nil, "should read vacuumed file")
|
||||||
|
defer delete(data)
|
||||||
|
|
||||||
|
testing.expect(t, len(data) > 0, "vacuumed file should be non-empty")
|
||||||
}
|
}
|
||||||
|
|
||||||
@(test)
|
@(test)
|
||||||
|
|||||||
@@ -7,6 +7,7 @@ import "core:strings"
|
|||||||
|
|
||||||
Feature :: enum {
|
Feature :: enum {
|
||||||
Git,
|
Git,
|
||||||
|
Fd,
|
||||||
}
|
}
|
||||||
|
|
||||||
AvailableFeatures :: bit_set[Feature]
|
AvailableFeatures :: bit_set[Feature]
|
||||||
@@ -26,6 +27,9 @@ check_features :: proc() -> AvailableFeatures {
|
|||||||
if find_binary(paths, "git") != "" {
|
if find_binary(paths, "git") != "" {
|
||||||
feats += {.Git}
|
feats += {.Git}
|
||||||
}
|
}
|
||||||
|
if find_binary(paths, "fd") != "" {
|
||||||
|
feats += {.Fd}
|
||||||
|
}
|
||||||
|
|
||||||
return feats
|
return feats
|
||||||
}
|
}
|
||||||
|
|||||||
@@ -1,320 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:os"
|
|
||||||
import "core:sort"
|
|
||||||
import "core:strings"
|
|
||||||
import "core:sys/linux"
|
|
||||||
import "core:testing"
|
|
||||||
|
|
||||||
// ============================================================================
|
|
||||||
// Gitignored file emission tests (emit ONLY gitignored files, descend everywhere)
|
|
||||||
// ============================================================================
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_basic_gitignored :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "repo/.env")
|
|
||||||
create_file(env, "repo/secrets.env")
|
|
||||||
create_file(env, "repo/normal.txt")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/.env", "repo/secrets.env",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_non_repo_not_scanned :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_dir(env, "norepo")
|
|
||||||
create_file(env, "norepo/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "norepo/.env")
|
|
||||||
|
|
||||||
assert_output_empty(t, env, nil, {})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_negation_pattern :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.env\n!prod.env\n")
|
|
||||||
create_file(env, "repo/.env")
|
|
||||||
create_file(env, "repo/secrets.env")
|
|
||||||
create_file(env, "repo/prod.env")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/.env", "repo/secrets.env",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_multiple_repos :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo1")
|
|
||||||
create_file(env, "repo1/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "repo1/a.env")
|
|
||||||
|
|
||||||
create_git_repo(env, "repo2")
|
|
||||||
create_file(env, "repo2/.gitignore", "*.key\n")
|
|
||||||
create_file(env, "repo2/secret.key")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo1/a.env", "repo2/secret.key",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_nested_repos :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "parent")
|
|
||||||
create_file(env, "parent/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "parent/top.env")
|
|
||||||
|
|
||||||
create_git_repo(env, "parent/child")
|
|
||||||
create_file(env, "parent/child/.gitignore", "*.key\n")
|
|
||||||
create_file(env, "parent/child/api.key")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"parent/top.env", "parent/child/api.key",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_nested_gitignore_read :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.env\n")
|
|
||||||
create_dir(env, "repo/sub")
|
|
||||||
create_file(env, "repo/sub/.gitignore", "*.txt\n")
|
|
||||||
create_file(env, "repo/sub/secret.txt")
|
|
||||||
create_file(env, "repo/sub/.env")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/sub/secret.txt", "repo/sub/.env",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_nested_gitignore_negation :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.log\n")
|
|
||||||
create_dir(env, "repo/sub")
|
|
||||||
create_file(env, "repo/sub/.gitignore", "!important.log\n")
|
|
||||||
create_file(env, "repo/sub/important.log")
|
|
||||||
create_file(env, "repo/sub/debug.log")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/sub/debug.log",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_multisegment_pattern :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "build/output.txt\n")
|
|
||||||
create_dir(env, "repo/build")
|
|
||||||
create_file(env, "repo/build/output.txt")
|
|
||||||
create_file(env, "repo/build/other.txt")
|
|
||||||
create_file(env, "repo/output.txt")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/build/output.txt",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_no_gitignore_file :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.env")
|
|
||||||
|
|
||||||
assert_output_empty(t, env, nil, {})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_empty_gitignore :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "\n\n# comment\n\n")
|
|
||||||
create_file(env, "repo/.env")
|
|
||||||
|
|
||||||
assert_output_empty(t, env, nil, {})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_multiple_search_dirs :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "dir1/repo")
|
|
||||||
create_file(env, "dir1/repo/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "dir1/repo/a.env")
|
|
||||||
create_file(env, "dir1/repo/normal.txt")
|
|
||||||
|
|
||||||
create_git_repo(env, "dir2/repo")
|
|
||||||
create_file(env, "dir2/repo/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "dir2/repo/b.env")
|
|
||||||
|
|
||||||
dir1 := join_path(env.temp_dir, "dir1")
|
|
||||||
defer delete(dir1)
|
|
||||||
dir2 := join_path(env.temp_dir, "dir2")
|
|
||||||
defer delete(dir2)
|
|
||||||
|
|
||||||
results := make([dynamic]string)
|
|
||||||
defer {
|
|
||||||
for r in results {delete(r)}
|
|
||||||
delete(results)
|
|
||||||
}
|
|
||||||
|
|
||||||
opts := WalkOptions{}
|
|
||||||
thread_count := os.get_processor_core_count()
|
|
||||||
walk({dir1, dir2}, &results, opts, thread_count)
|
|
||||||
|
|
||||||
testing.expect_value(t, len(results), 2)
|
|
||||||
|
|
||||||
actual := make([dynamic]string, 0, len(results))
|
|
||||||
for r in results {
|
|
||||||
stripped := r
|
|
||||||
if strings.has_prefix(stripped, env.temp_dir) {
|
|
||||||
stripped = stripped[len(env.temp_dir):]
|
|
||||||
if len(stripped) > 0 && stripped[0] == '/' {
|
|
||||||
stripped = stripped[1:]
|
|
||||||
}
|
|
||||||
}
|
|
||||||
append(&actual, stripped)
|
|
||||||
}
|
|
||||||
defer delete(actual)
|
|
||||||
|
|
||||||
expected := []string{"dir1/repo/a.env", "dir2/repo/b.env"}
|
|
||||||
|
|
||||||
sort.quick_sort(actual[:])
|
|
||||||
sort.quick_sort(expected[:])
|
|
||||||
|
|
||||||
for i in 0 ..< len(expected) {
|
|
||||||
testing.expect_value(t, actual[i], expected[i])
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
// ============================================================================
|
|
||||||
// Ignored directory recursion tests
|
|
||||||
// ============================================================================
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_ignored_dir_descended :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "secrets/\n")
|
|
||||||
create_dir(env, "repo/secrets")
|
|
||||||
create_file(env, "repo/secrets/.env")
|
|
||||||
create_file(env, "repo/secrets/api.key")
|
|
||||||
|
|
||||||
// Ignored dir's contents are emitted AND descended into
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/secrets/", "repo/secrets/.env", "repo/secrets/api.key",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_nested_ignored_dir :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "build/\n")
|
|
||||||
create_dir(env, "repo/build")
|
|
||||||
create_dir(env, "repo/build/sub")
|
|
||||||
create_file(env, "repo/build/output.txt")
|
|
||||||
create_file(env, "repo/build/sub/deep.env")
|
|
||||||
|
|
||||||
assert_output(t, env, nil, {}, {
|
|
||||||
"repo/build/", "repo/build/output.txt",
|
|
||||||
"repo/build/sub/", "repo/build/sub/deep.env",
|
|
||||||
})
|
|
||||||
}
|
|
||||||
|
|
||||||
// ============================================================================
|
|
||||||
// Filter tests (excludes, pattern)
|
|
||||||
// ============================================================================
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_excludes_prune_dirs :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.env\n")
|
|
||||||
create_file(env, "repo/.env")
|
|
||||||
create_dir(env, "repo/vendor")
|
|
||||||
create_file(env, "repo/vendor/lib.env")
|
|
||||||
|
|
||||||
assert_output(t, env, nil,
|
|
||||||
{excludes = {"vendor"}},
|
|
||||||
{"repo/.env"},
|
|
||||||
)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_pattern_filters_results :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.env\n*.key\n")
|
|
||||||
create_file(env, "repo/.env")
|
|
||||||
create_file(env, "repo/secrets.env")
|
|
||||||
create_file(env, "repo/master.key")
|
|
||||||
|
|
||||||
assert_output(t, env, nil,
|
|
||||||
{pattern = "\\.env$"},
|
|
||||||
{"repo/.env", "repo/secrets.env"},
|
|
||||||
)
|
|
||||||
}
|
|
||||||
|
|
||||||
// ============================================================================
|
|
||||||
// Special file type tests
|
|
||||||
// ============================================================================
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_fifo_emitted :: proc(t: ^testing.T) {
|
|
||||||
env := create_test_env()
|
|
||||||
defer destroy_test_env(&env)
|
|
||||||
|
|
||||||
create_git_repo(env, "repo")
|
|
||||||
create_file(env, "repo/.gitignore", "*.env\n*.fifo\n")
|
|
||||||
|
|
||||||
fifo_path := join_path(env.temp_dir, "repo/test.fifo")
|
|
||||||
defer delete(fifo_path)
|
|
||||||
cpath := strings.clone_to_cstring(fifo_path)
|
|
||||||
defer delete(cpath)
|
|
||||||
linux.mknod(cpath, linux.S_IFIFO | linux.Mode{.IRUSR, .IWUSR}, 0)
|
|
||||||
|
|
||||||
assert_output(t, env, nil,
|
|
||||||
{pattern = "\\.fifo$"},
|
|
||||||
{"repo/test.fifo"},
|
|
||||||
)
|
|
||||||
}
|
|
||||||
@@ -1,88 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:strings"
|
|
||||||
|
|
||||||
Gitignore :: struct {
|
|
||||||
rules: [dynamic]Rule,
|
|
||||||
}
|
|
||||||
|
|
||||||
Rule :: struct {
|
|
||||||
pattern: GlobPattern,
|
|
||||||
negated: bool,
|
|
||||||
dir_only: bool,
|
|
||||||
}
|
|
||||||
|
|
||||||
Match :: enum {
|
|
||||||
None,
|
|
||||||
Ignored,
|
|
||||||
Unignored,
|
|
||||||
}
|
|
||||||
|
|
||||||
is_ignored :: proc(gi: ^Gitignore, path: string, is_dir: bool) -> bool {
|
|
||||||
return check_match(gi, path, is_dir) == .Ignored
|
|
||||||
}
|
|
||||||
|
|
||||||
check_match :: proc(gi: ^Gitignore, path: string, is_dir: bool) -> Match {
|
|
||||||
result := Match.None
|
|
||||||
for &rule in gi.rules {
|
|
||||||
if rule.dir_only && !is_dir do continue
|
|
||||||
if glob_match_compiled(&rule.pattern, path) {
|
|
||||||
result = rule.negated ? .Unignored : .Ignored
|
|
||||||
}
|
|
||||||
}
|
|
||||||
return result
|
|
||||||
}
|
|
||||||
|
|
||||||
parse :: proc(content: string) -> Gitignore {
|
|
||||||
gi: Gitignore
|
|
||||||
gi.rules = make([dynamic]Rule)
|
|
||||||
|
|
||||||
remaining := content
|
|
||||||
for {
|
|
||||||
line, ok := strings.split_lines_iterator(&remaining)
|
|
||||||
if !ok do break
|
|
||||||
|
|
||||||
s := strings.trim_space(line)
|
|
||||||
if len(s) == 0 do continue
|
|
||||||
if s[0] == '#' do continue
|
|
||||||
|
|
||||||
negated := false
|
|
||||||
if s[0] == '!' {
|
|
||||||
negated = true
|
|
||||||
s = s[1:]
|
|
||||||
}
|
|
||||||
|
|
||||||
if len(s) > 0 && s[0] == '\\' {
|
|
||||||
if len(s) > 1 && (s[1] == '#' || s[1] == '!') {
|
|
||||||
s = s[1:]
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
dir_only := false
|
|
||||||
if len(s) > 0 && s[len(s) - 1] == '/' {
|
|
||||||
dir_only = true
|
|
||||||
s = s[:len(s) - 1]
|
|
||||||
}
|
|
||||||
|
|
||||||
anchored := false
|
|
||||||
if len(s) > 0 && s[0] == '/' {
|
|
||||||
anchored = true
|
|
||||||
s = s[1:]
|
|
||||||
}
|
|
||||||
|
|
||||||
if len(s) == 0 do continue
|
|
||||||
|
|
||||||
gp := glob_compile(s, anchored)
|
|
||||||
append(&gi.rules, Rule{pattern = gp, negated = negated, dir_only = dir_only})
|
|
||||||
}
|
|
||||||
|
|
||||||
return gi
|
|
||||||
}
|
|
||||||
|
|
||||||
destroy :: proc(gi: ^Gitignore) {
|
|
||||||
for &rule in gi.rules {
|
|
||||||
glob_destroy(&rule.pattern)
|
|
||||||
}
|
|
||||||
delete(gi.rules)
|
|
||||||
}
|
|
||||||
|
|
||||||
@@ -1,118 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:testing"
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_basic :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("*.env\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "foo.env", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env.local", false), false)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "config.yaml", false), false)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_negation :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("*.env\n!.env.production\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env.production", false), false)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_dir_only :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("node_modules/\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "node_modules", true), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "node_modules", false), false)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_anchored :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("/secret.key\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "secret.key", false), true)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_comments_skipped :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("# this is a comment\n#another\n*.tmp\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, len(gi.rules), 1)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "file.tmp", false), true)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_blank_lines_skipped :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("\n\n \n*.log\n\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, len(gi.rules), 1)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_last_match_wins :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("*.env\n!*.env\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env", false), false)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_no_rules :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "anything", false), false)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_env_pattern :: proc(t: ^testing.T) {
|
|
||||||
gi := parse(".env*\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".env.local", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, ".envrc", false), true)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_globstar :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("**/cache\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "cache", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "foo/cache", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "foo/bar/cache", false), true)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_star_negation_subpath :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("*\n!public/\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
// public dir itself is un-ignored
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "public", true), false)
|
|
||||||
// children of public/ should still be ignored by *
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "public/uuid-dir", true), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "public/uuid-dir/file.txt", false), true)
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_is_ignored_hash_pattern :: proc(t: ^testing.T) {
|
|
||||||
gi := parse("\\#*\\#\n")
|
|
||||||
defer destroy(&gi)
|
|
||||||
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "#foo#", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "#test#", false), true)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "AUTHORS", false), false)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "build.zig", false), false)
|
|
||||||
testing.expect_value(t, is_ignored(&gi, "ChangeLog", false), false)
|
|
||||||
}
|
|
||||||
|
|
||||||
203
findr/glob.odin
203
findr/glob.odin
@@ -1,203 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
Range :: struct {
|
|
||||||
lo: u8,
|
|
||||||
hi: u8,
|
|
||||||
}
|
|
||||||
|
|
||||||
Class_Data :: struct {
|
|
||||||
negated: bool,
|
|
||||||
ranges: [dynamic]Range,
|
|
||||||
}
|
|
||||||
|
|
||||||
Token_Kind :: enum u8 { Char, Star, Globstar, Question, Class }
|
|
||||||
|
|
||||||
Token :: struct {
|
|
||||||
kind: Token_Kind,
|
|
||||||
byte: u8,
|
|
||||||
class_idx: u16,
|
|
||||||
}
|
|
||||||
|
|
||||||
GlobPattern :: struct {
|
|
||||||
tokens: [dynamic]Token,
|
|
||||||
classes: [dynamic]Class_Data,
|
|
||||||
anchored: bool,
|
|
||||||
}
|
|
||||||
|
|
||||||
glob_compile :: proc(pattern: string, anchored: bool) -> GlobPattern {
|
|
||||||
gp: GlobPattern
|
|
||||||
gp.tokens = make([dynamic]Token)
|
|
||||||
gp.classes = make([dynamic]Class_Data)
|
|
||||||
gp.anchored = anchored
|
|
||||||
|
|
||||||
i := 0
|
|
||||||
for i < len(pattern) {
|
|
||||||
c := pattern[i]
|
|
||||||
|
|
||||||
if c == '*' {
|
|
||||||
if i + 1 < len(pattern) && pattern[i + 1] == '*' {
|
|
||||||
prev_slash := i == 0 || pattern[i - 1] == '/'
|
|
||||||
at_end := i + 2 >= len(pattern)
|
|
||||||
next_slash := !at_end && pattern[i + 2] == '/'
|
|
||||||
|
|
||||||
if prev_slash && (next_slash || at_end) {
|
|
||||||
append(&gp.tokens, Token{kind = .Globstar})
|
|
||||||
if next_slash {
|
|
||||||
i += 3
|
|
||||||
} else {
|
|
||||||
i += 2
|
|
||||||
}
|
|
||||||
} else {
|
|
||||||
append(&gp.tokens, Token{kind = .Star})
|
|
||||||
i += 2
|
|
||||||
}
|
|
||||||
} else {
|
|
||||||
append(&gp.tokens, Token{kind = .Star})
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
} else if c == '?' {
|
|
||||||
append(&gp.tokens, Token{kind = .Question})
|
|
||||||
i += 1
|
|
||||||
} else if c == '[' {
|
|
||||||
i += 1
|
|
||||||
negated := false
|
|
||||||
if i < len(pattern) && pattern[i] == '!' {
|
|
||||||
negated = true
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
|
|
||||||
ranges := make([dynamic]Range)
|
|
||||||
|
|
||||||
if i < len(pattern) && pattern[i] == ']' {
|
|
||||||
append(&ranges, Range{lo = ']', hi = ']'})
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
|
|
||||||
for i < len(pattern) && pattern[i] != ']' {
|
|
||||||
if i + 2 < len(pattern) && pattern[i + 1] == '-' && pattern[i + 2] != ']' {
|
|
||||||
append(&ranges, Range{lo = pattern[i], hi = pattern[i + 2]})
|
|
||||||
i += 3
|
|
||||||
} else {
|
|
||||||
append(&ranges, Range{lo = pattern[i], hi = pattern[i]})
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
if i < len(pattern) {
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
|
|
||||||
class_idx := u16(len(gp.classes))
|
|
||||||
append(&gp.classes, Class_Data{negated = negated, ranges = ranges})
|
|
||||||
append(&gp.tokens, Token{kind = .Class, class_idx = class_idx})
|
|
||||||
} else if c == '\\' {
|
|
||||||
i += 1
|
|
||||||
if i < len(pattern) {
|
|
||||||
append(&gp.tokens, Token{kind = .Char, byte = pattern[i]})
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
} else {
|
|
||||||
append(&gp.tokens, Token{kind = .Char, byte = c})
|
|
||||||
i += 1
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
return gp
|
|
||||||
}
|
|
||||||
|
|
||||||
match_tokens :: proc(tokens: []Token, classes: []Class_Data, ti: int, path: string, pi: int) -> bool {
|
|
||||||
if ti >= len(tokens) {
|
|
||||||
return pi == len(path)
|
|
||||||
}
|
|
||||||
|
|
||||||
tok := tokens[ti]
|
|
||||||
switch tok.kind {
|
|
||||||
case .Char:
|
|
||||||
if pi < len(path) && path[pi] == tok.byte {
|
|
||||||
return match_tokens(tokens, classes, ti + 1, path, pi + 1)
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
|
|
||||||
case .Question:
|
|
||||||
if pi < len(path) && path[pi] != '/' {
|
|
||||||
return match_tokens(tokens, classes, ti + 1, path, pi + 1)
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
|
|
||||||
case .Star:
|
|
||||||
max_end := pi
|
|
||||||
for max_end < len(path) && path[max_end] != '/' {
|
|
||||||
max_end += 1
|
|
||||||
}
|
|
||||||
for end := max_end; end >= pi; end -= 1 {
|
|
||||||
if match_tokens(tokens, classes, ti + 1, path, end) {
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
|
|
||||||
case .Globstar:
|
|
||||||
if ti + 1 >= len(tokens) {
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
if match_tokens(tokens, classes, ti + 1, path, pi) {
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
for end := pi + 1; end <= len(path); end += 1 {
|
|
||||||
if path[end - 1] == '/' {
|
|
||||||
if match_tokens(tokens, classes, ti + 1, path, end) {
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
|
|
||||||
case .Class:
|
|
||||||
if pi >= len(path) {
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
cd := classes[tok.class_idx]
|
|
||||||
ch := path[pi]
|
|
||||||
in_range := false
|
|
||||||
for r in cd.ranges {
|
|
||||||
if ch >= r.lo && ch <= r.hi {
|
|
||||||
in_range = true
|
|
||||||
break
|
|
||||||
}
|
|
||||||
}
|
|
||||||
if in_range != cd.negated {
|
|
||||||
return match_tokens(tokens, classes, ti + 1, path, pi + 1)
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
glob_match_compiled :: proc(gp: ^GlobPattern, path: string) -> bool {
|
|
||||||
tokens := gp.tokens[:]
|
|
||||||
classes := gp.classes[:]
|
|
||||||
|
|
||||||
if gp.anchored {
|
|
||||||
return match_tokens(tokens, classes, 0, path, 0)
|
|
||||||
}
|
|
||||||
|
|
||||||
if match_tokens(tokens, classes, 0, path, 0) {
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
for i := 1; i < len(path); i += 1 {
|
|
||||||
if path[i - 1] == '/' {
|
|
||||||
if match_tokens(tokens, classes, 0, path, i) {
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
glob_destroy :: proc(gp: ^GlobPattern) {
|
|
||||||
for &cd in gp.classes {
|
|
||||||
delete(cd.ranges)
|
|
||||||
}
|
|
||||||
delete(gp.classes)
|
|
||||||
delete(gp.tokens)
|
|
||||||
}
|
|
||||||
@@ -1,111 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:testing"
|
|
||||||
|
|
||||||
glob_match :: proc(pattern: string, path: string, anchored: bool) -> bool {
|
|
||||||
gp := glob_compile(pattern, anchored)
|
|
||||||
result := glob_match_compiled(&gp, path)
|
|
||||||
glob_destroy(&gp)
|
|
||||||
return result
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_simple :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("foo", "foo", false))
|
|
||||||
testing.expect(t, glob_match("foo", "bar/foo", false))
|
|
||||||
testing.expect(t, !glob_match("foo", "foobar", false))
|
|
||||||
testing.expect(t, !glob_match("foo", "foo/bar", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_anchored :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("foo", "foo", true))
|
|
||||||
testing.expect(t, !glob_match("foo", "bar/foo", true))
|
|
||||||
testing.expect(t, !glob_match("foo", "foobar", true))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_star :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("*.log", "test.log", false))
|
|
||||||
testing.expect(t, glob_match("*.log", ".log", false))
|
|
||||||
testing.expect(t, !glob_match("*.log", "test.txt", false))
|
|
||||||
testing.expect(t, !glob_match("*.log", "dir/test", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_question :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("?.log", "a.log", false))
|
|
||||||
testing.expect(t, !glob_match("?.log", "ab.log", false))
|
|
||||||
testing.expect(t, !glob_match("?.log", ".log", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_char_class :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("[abc].log", "a.log", false))
|
|
||||||
testing.expect(t, glob_match("[abc].log", "b.log", false))
|
|
||||||
testing.expect(t, !glob_match("[abc].log", "d.log", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_negated_class :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("[!abc].log", "d.log", false))
|
|
||||||
testing.expect(t, !glob_match("[!abc].log", "a.log", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_dot_literal :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match(".env", ".env", false))
|
|
||||||
testing.expect(t, glob_match(".env", "dir/.env", false))
|
|
||||||
testing.expect(t, !glob_match(".env", "env", false))
|
|
||||||
testing.expect(t, !glob_match(".env", "x.env", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_globstar_prefix :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("**/foo", "foo", false))
|
|
||||||
testing.expect(t, glob_match("**/foo", "a/b/foo", false))
|
|
||||||
testing.expect(t, !glob_match("**/foo", "foobar", false))
|
|
||||||
testing.expect(t, !glob_match("**/foo", "a/foobar", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_globstar_suffix :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("abc/**", "abc/x", false))
|
|
||||||
testing.expect(t, glob_match("abc/**", "abc/x/y", false))
|
|
||||||
testing.expect(t, !glob_match("abc/**", "abc", false))
|
|
||||||
testing.expect(t, !glob_match("abc/**", "abcd/x", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_globstar_middle :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("foo/**/bar", "foo/bar", false))
|
|
||||||
testing.expect(t, glob_match("foo/**/bar", "foo/x/bar", false))
|
|
||||||
testing.expect(t, !glob_match("foo/**/bar", "foo/barx", false))
|
|
||||||
testing.expect(t, !glob_match("foo/**/bar", "foo/x/y/baz", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_backslash_escape :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("\\!foo", "!foo", false))
|
|
||||||
testing.expect(t, !glob_match("\\!foo", "foo", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_hash_literal :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("#foo", "#foo", false))
|
|
||||||
testing.expect(t, !glob_match("#foo", "foo", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_hash_pattern :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("#*#", "#test#", false))
|
|
||||||
testing.expect(t, glob_match("#*#", "##", false))
|
|
||||||
testing.expect(t, !glob_match("#*#", "test", false))
|
|
||||||
testing.expect(t, !glob_match("#*#", "#test", false))
|
|
||||||
}
|
|
||||||
|
|
||||||
@(test)
|
|
||||||
test_glob_empty :: proc(t: ^testing.T) {
|
|
||||||
testing.expect(t, glob_match("", "", false))
|
|
||||||
testing.expect(t, !glob_match("", "foo", false))
|
|
||||||
}
|
|
||||||
128
findr/repos.odin
128
findr/repos.odin
@@ -1,128 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:strings"
|
|
||||||
import "core:sync"
|
|
||||||
import "core:sys/linux"
|
|
||||||
import "core:thread"
|
|
||||||
|
|
||||||
RepoPool :: struct {
|
|
||||||
queue: [dynamic]string,
|
|
||||||
queue_mutex: sync.Mutex,
|
|
||||||
queue_sema: sync.Atomic_Sema,
|
|
||||||
results: ^[dynamic]string,
|
|
||||||
results_lock: sync.Mutex,
|
|
||||||
active: i64,
|
|
||||||
done: sync.One_Shot_Event,
|
|
||||||
threads: []^thread.Thread,
|
|
||||||
}
|
|
||||||
|
|
||||||
find_repos :: proc(roots: []string, results: ^[dynamic]string, thread_count: int) {
|
|
||||||
if len(roots) == 0 do return
|
|
||||||
|
|
||||||
pool := new(RepoPool)
|
|
||||||
pool.queue = make([dynamic]string)
|
|
||||||
pool.results = results
|
|
||||||
pool.active = i64(len(roots))
|
|
||||||
pool.threads = make([]^thread.Thread, thread_count)
|
|
||||||
|
|
||||||
for root in roots {
|
|
||||||
root_clone, _ := strings.clone(root)
|
|
||||||
append(&pool.queue, root_clone)
|
|
||||||
sync.atomic_sema_post(&pool.queue_sema)
|
|
||||||
}
|
|
||||||
|
|
||||||
for i in 0 ..< thread_count {
|
|
||||||
t := thread.create(repo_worker)
|
|
||||||
t.data = rawptr(pool)
|
|
||||||
t.init_context = context
|
|
||||||
thread.start(t)
|
|
||||||
pool.threads[i] = t
|
|
||||||
}
|
|
||||||
|
|
||||||
sync.one_shot_event_wait(&pool.done)
|
|
||||||
|
|
||||||
for _ in 0 ..< thread_count {
|
|
||||||
sync.atomic_sema_post(&pool.queue_sema)
|
|
||||||
}
|
|
||||||
|
|
||||||
for t in pool.threads {
|
|
||||||
thread.destroy(t)
|
|
||||||
}
|
|
||||||
delete(pool.threads)
|
|
||||||
|
|
||||||
for path in pool.queue {
|
|
||||||
delete(path)
|
|
||||||
}
|
|
||||||
delete(pool.queue)
|
|
||||||
|
|
||||||
free(pool)
|
|
||||||
}
|
|
||||||
|
|
||||||
repo_worker :: proc(t: ^thread.Thread) {
|
|
||||||
pool := cast(^RepoPool)t.data
|
|
||||||
|
|
||||||
for {
|
|
||||||
sync.atomic_sema_wait(&pool.queue_sema)
|
|
||||||
|
|
||||||
sync.mutex_lock(&pool.queue_mutex)
|
|
||||||
if len(pool.queue) == 0 {
|
|
||||||
sync.mutex_unlock(&pool.queue_mutex)
|
|
||||||
if sync.atomic_load_explicit(&pool.active, .Acquire) == 0 {
|
|
||||||
sync.one_shot_event_signal(&pool.done)
|
|
||||||
}
|
|
||||||
break
|
|
||||||
}
|
|
||||||
last := len(pool.queue) - 1
|
|
||||||
dir_path := pool.queue[last]
|
|
||||||
ordered_remove(&pool.queue, last)
|
|
||||||
sync.mutex_unlock(&pool.queue_mutex)
|
|
||||||
|
|
||||||
process_repo_dir(pool, dir_path)
|
|
||||||
delete(dir_path)
|
|
||||||
|
|
||||||
old := sync.atomic_sub_explicit(&pool.active, 1, .Release)
|
|
||||||
if old == 1 {
|
|
||||||
sync.one_shot_event_signal(&pool.done)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
process_repo_dir :: proc(pool: ^RepoPool, dir_path: string) {
|
|
||||||
cpath := strings.clone_to_cstring(dir_path)
|
|
||||||
if cpath == nil do return
|
|
||||||
defer delete(cpath)
|
|
||||||
|
|
||||||
fd, open_err := linux.open(cpath, {.DIRECTORY, .CLOEXEC})
|
|
||||||
if open_err != .NONE do return
|
|
||||||
defer linux.close(fd)
|
|
||||||
|
|
||||||
if has_git_dir(fd) {
|
|
||||||
cloned, _ := strings.clone(dir_path)
|
|
||||||
sync.mutex_lock(&pool.results_lock)
|
|
||||||
append(pool.results, cloned)
|
|
||||||
sync.mutex_unlock(&pool.results_lock)
|
|
||||||
}
|
|
||||||
|
|
||||||
buf: [32 * 1024]u8
|
|
||||||
|
|
||||||
for {
|
|
||||||
n, errno := linux.getdents(fd, buf[:])
|
|
||||||
if n <= 0 || errno != .NONE do break
|
|
||||||
|
|
||||||
offs := 0
|
|
||||||
for d in linux.dirent_iterate_buf(buf[:n], &offs) {
|
|
||||||
name := linux.dirent_name(d)
|
|
||||||
if name == "." || name == ".." do continue
|
|
||||||
if name == ".git" do continue
|
|
||||||
|
|
||||||
if d.type == .DIR {
|
|
||||||
child_path := join_path(dir_path, name)
|
|
||||||
sync.atomic_add_explicit(&pool.active, 1, .Relaxed)
|
|
||||||
sync.mutex_lock(&pool.queue_mutex)
|
|
||||||
append(&pool.queue, child_path)
|
|
||||||
sync.mutex_unlock(&pool.queue_mutex)
|
|
||||||
sync.atomic_sema_post(&pool.queue_sema)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
@@ -1,152 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:fmt"
|
|
||||||
import "core:log"
|
|
||||||
import "core:os"
|
|
||||||
import "core:sort"
|
|
||||||
import "core:strings"
|
|
||||||
import "core:testing"
|
|
||||||
|
|
||||||
TestEnv :: struct {
|
|
||||||
temp_dir: string,
|
|
||||||
}
|
|
||||||
|
|
||||||
create_test_env :: proc() -> (env: TestEnv) {
|
|
||||||
tmp, err := os.mkdir_temp("", "findr-test-*", context.allocator)
|
|
||||||
if err != nil {
|
|
||||||
log.error("Failed to create temp dir:", err)
|
|
||||||
panic("Failed to create temp dir")
|
|
||||||
}
|
|
||||||
|
|
||||||
env.temp_dir = tmp
|
|
||||||
return
|
|
||||||
}
|
|
||||||
|
|
||||||
destroy_test_env :: proc(env: ^TestEnv) {
|
|
||||||
os.remove_all(env.temp_dir)
|
|
||||||
delete(env.temp_dir)
|
|
||||||
}
|
|
||||||
|
|
||||||
create_dir :: proc(env: TestEnv, path: string) {
|
|
||||||
full := join_path(env.temp_dir, path)
|
|
||||||
defer delete(full)
|
|
||||||
os.mkdir_all(full, os.Permissions_Default_Directory)
|
|
||||||
}
|
|
||||||
|
|
||||||
create_file :: proc(env: TestEnv, path: string, content: string = "") {
|
|
||||||
full := join_path(env.temp_dir, path)
|
|
||||||
defer delete(full)
|
|
||||||
|
|
||||||
dir_end := strings.last_index(full, "/")
|
|
||||||
if dir_end >= 0 {
|
|
||||||
dir_path := full[:dir_end]
|
|
||||||
os.mkdir_all(dir_path, os.Permissions_Default_Directory)
|
|
||||||
}
|
|
||||||
|
|
||||||
f, err := os.create(full)
|
|
||||||
if err != nil {
|
|
||||||
log.error("Failed to create file:", full, err)
|
|
||||||
return
|
|
||||||
}
|
|
||||||
if len(content) > 0 {
|
|
||||||
os.write_string(f, content)
|
|
||||||
}
|
|
||||||
os.close(f)
|
|
||||||
}
|
|
||||||
|
|
||||||
create_git_repo :: proc(env: TestEnv, path: string) {
|
|
||||||
sub := join_path(path, ".git")
|
|
||||||
defer delete(sub)
|
|
||||||
create_dir(env, sub)
|
|
||||||
}
|
|
||||||
|
|
||||||
assert_output :: proc(
|
|
||||||
t: ^testing.T,
|
|
||||||
env: TestEnv,
|
|
||||||
args: []string,
|
|
||||||
opts: WalkOptions,
|
|
||||||
expected: []string,
|
|
||||||
) {
|
|
||||||
results := collect_results(env, args, opts)
|
|
||||||
defer {
|
|
||||||
for r in results {delete(r)}
|
|
||||||
delete(results)
|
|
||||||
}
|
|
||||||
|
|
||||||
sorted_expected := make([dynamic]string, 0, len(expected))
|
|
||||||
for e in expected {append(&sorted_expected, e)}
|
|
||||||
defer delete(sorted_expected)
|
|
||||||
|
|
||||||
sorted_actual := make([dynamic]string, 0, len(results))
|
|
||||||
for a in results {append(&sorted_actual, a)}
|
|
||||||
defer delete(sorted_actual)
|
|
||||||
|
|
||||||
sort.quick_sort(sorted_expected[:])
|
|
||||||
sort.quick_sort(sorted_actual[:])
|
|
||||||
|
|
||||||
if len(sorted_expected) != len(sorted_actual) {
|
|
||||||
testing.fail(t)
|
|
||||||
log.error(
|
|
||||||
fmt.tprintf("Expected %d results, got %d", len(sorted_expected), len(sorted_actual)),
|
|
||||||
)
|
|
||||||
log.error("Expected:", sorted_expected[:])
|
|
||||||
log.error("Actual: ", sorted_actual[:])
|
|
||||||
return
|
|
||||||
}
|
|
||||||
|
|
||||||
for i in 0 ..< len(sorted_expected) {
|
|
||||||
if sorted_expected[i] != sorted_actual[i] {
|
|
||||||
testing.fail(t)
|
|
||||||
log.error(fmt.tprintf("Mismatch at index %d", i))
|
|
||||||
log.error("Expected:", sorted_expected[:])
|
|
||||||
log.error("Actual: ", sorted_actual[:])
|
|
||||||
return
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
assert_output_empty :: proc(
|
|
||||||
t: ^testing.T,
|
|
||||||
env: TestEnv,
|
|
||||||
args: []string,
|
|
||||||
opts: WalkOptions,
|
|
||||||
) {
|
|
||||||
results := collect_results(env, args, opts)
|
|
||||||
defer {
|
|
||||||
for r in results {delete(r)}
|
|
||||||
delete(results)
|
|
||||||
}
|
|
||||||
if len(results) > 0 {
|
|
||||||
testing.fail(t)
|
|
||||||
log.error(fmt.tprintf("Expected no results, got %d:", len(results)))
|
|
||||||
for r in results {
|
|
||||||
log.error(" ", r)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
collect_results :: proc(env: TestEnv, args: []string, opts: WalkOptions) -> [dynamic]string {
|
|
||||||
results := make([dynamic]string)
|
|
||||||
|
|
||||||
full_args := make([dynamic]string, 0, len(args) + 1, context.temp_allocator)
|
|
||||||
append(&full_args, env.temp_dir)
|
|
||||||
for a in args {append(&full_args, a)}
|
|
||||||
|
|
||||||
thread_count := os.get_processor_core_count()
|
|
||||||
walk(full_args[:], &results, opts, thread_count)
|
|
||||||
|
|
||||||
for i in 0 ..< len(results) {
|
|
||||||
r := results[i]
|
|
||||||
if strings.has_prefix(r, env.temp_dir) {
|
|
||||||
stripped := r[len(env.temp_dir):]
|
|
||||||
if len(stripped) > 0 && stripped[0] == '/' {
|
|
||||||
stripped = stripped[1:]
|
|
||||||
}
|
|
||||||
new_r, _ := strings.clone(stripped)
|
|
||||||
delete(r)
|
|
||||||
results[i] = new_r
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
return results
|
|
||||||
}
|
|
||||||
@@ -1,449 +0,0 @@
|
|||||||
package findr
|
|
||||||
|
|
||||||
import "core:fmt"
|
|
||||||
import "core:os"
|
|
||||||
import "core:strings"
|
|
||||||
import "core:sync"
|
|
||||||
import "core:sync/chan"
|
|
||||||
import "core:sys/linux"
|
|
||||||
import "core:text/regex"
|
|
||||||
import "core:thread"
|
|
||||||
|
|
||||||
OUTPUT_BUF_SIZE :: 64 * 1024
|
|
||||||
|
|
||||||
WalkOptions :: struct {
|
|
||||||
pattern: string, // regex on basename; "" = match all
|
|
||||||
excludes: []string, // glob patterns to skip entirely
|
|
||||||
}
|
|
||||||
|
|
||||||
GIContext :: struct {
|
|
||||||
gi: ^Gitignore, // nil if this dir had no .gitignore
|
|
||||||
base_rel: string, // relative path from repo root to this dir
|
|
||||||
parent: ^GIContext, // parent context (nil if repo root)
|
|
||||||
}
|
|
||||||
|
|
||||||
WorkItem :: struct {
|
|
||||||
path: string, // absolute directory path
|
|
||||||
rel: string, // relative path from repo root ("" = root)
|
|
||||||
gi_ctx: ^GIContext, // gitignore chain (nil = outside any repo)
|
|
||||||
in_repo: bool, // true if inside a git repo
|
|
||||||
in_ignored: bool, // true if inside a gitignored directory
|
|
||||||
}
|
|
||||||
|
|
||||||
WalkerPool :: struct {
|
|
||||||
queue: [dynamic]WorkItem,
|
|
||||||
queue_mutex: sync.Mutex,
|
|
||||||
queue_sema: sync.Atomic_Sema,
|
|
||||||
result_chan: chan.Chan([]u8),
|
|
||||||
active: i64,
|
|
||||||
done: sync.One_Shot_Event,
|
|
||||||
threads: []^thread.Thread,
|
|
||||||
opts: WalkOptions,
|
|
||||||
pattern_re: regex.Regular_Expression,
|
|
||||||
has_pattern: bool,
|
|
||||||
exclude_gi: ^Gitignore,
|
|
||||||
all_contexts: [dynamic]^GIContext,
|
|
||||||
contexts_lock: sync.Mutex,
|
|
||||||
}
|
|
||||||
|
|
||||||
Collector_Data :: struct {
|
|
||||||
ch: chan.Chan([]u8),
|
|
||||||
results: ^[dynamic]string,
|
|
||||||
}
|
|
||||||
|
|
||||||
collect_worker :: proc(t: ^thread.Thread) {
|
|
||||||
data := cast(^Collector_Data)t.data
|
|
||||||
for {
|
|
||||||
batch, ok := chan.recv(data.ch)
|
|
||||||
if !ok do break
|
|
||||||
start := 0
|
|
||||||
for i in 0 ..< len(batch) {
|
|
||||||
if batch[i] == '\n' {
|
|
||||||
if i > start {
|
|
||||||
s, _ := strings.clone(string(batch[start:i]))
|
|
||||||
append(data.results, s)
|
|
||||||
}
|
|
||||||
start = i + 1
|
|
||||||
}
|
|
||||||
}
|
|
||||||
delete(batch)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
walk :: proc(roots: []string, results: ^[dynamic]string, opts: WalkOptions, thread_count: int) {
|
|
||||||
if len(roots) == 0 do return
|
|
||||||
|
|
||||||
ch, _ := chan.create(chan.Chan([]u8), max(2 * thread_count, 2), context.allocator)
|
|
||||||
defer chan.destroy(ch)
|
|
||||||
|
|
||||||
data := new(Collector_Data)
|
|
||||||
data.ch = ch
|
|
||||||
data.results = results
|
|
||||||
defer free(data)
|
|
||||||
|
|
||||||
collector := thread.create(collect_worker)
|
|
||||||
collector.data = rawptr(data)
|
|
||||||
collector.init_context = context
|
|
||||||
thread.start(collector)
|
|
||||||
|
|
||||||
pool := new(WalkerPool)
|
|
||||||
pool.queue = make([dynamic]WorkItem)
|
|
||||||
pool.result_chan = ch
|
|
||||||
pool.active = i64(len(roots))
|
|
||||||
pool.threads = make([]^thread.Thread, thread_count)
|
|
||||||
pool.all_contexts = make([dynamic]^GIContext)
|
|
||||||
pool.opts = opts
|
|
||||||
pool.exclude_gi = nil
|
|
||||||
pool.has_pattern = false
|
|
||||||
|
|
||||||
if len(opts.pattern) > 0 {
|
|
||||||
re, err := regex.create(opts.pattern, {regex.Flag.No_Capture})
|
|
||||||
if err == nil {
|
|
||||||
pool.pattern_re = re
|
|
||||||
pool.has_pattern = true
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
if len(opts.excludes) > 0 {
|
|
||||||
sb: strings.Builder
|
|
||||||
strings.builder_init(&sb)
|
|
||||||
for ex in opts.excludes {
|
|
||||||
fmt.sbprintf(&sb, "%s\n", ex)
|
|
||||||
}
|
|
||||||
content := strings.to_string(sb)
|
|
||||||
pool.exclude_gi = new(Gitignore)
|
|
||||||
pool.exclude_gi^ = parse(content)
|
|
||||||
strings.builder_destroy(&sb)
|
|
||||||
}
|
|
||||||
|
|
||||||
for root in roots {
|
|
||||||
root_clone, _ := strings.clone(root)
|
|
||||||
append(&pool.queue, WorkItem{path = root_clone})
|
|
||||||
sync.atomic_sema_post(&pool.queue_sema)
|
|
||||||
}
|
|
||||||
|
|
||||||
for i in 0 ..< thread_count {
|
|
||||||
t := thread.create(walk_worker)
|
|
||||||
t.data = rawptr(pool)
|
|
||||||
t.init_context = context
|
|
||||||
thread.start(t)
|
|
||||||
pool.threads[i] = t
|
|
||||||
}
|
|
||||||
|
|
||||||
sync.one_shot_event_wait(&pool.done)
|
|
||||||
|
|
||||||
for _ in 0 ..< thread_count {
|
|
||||||
sync.atomic_sema_post(&pool.queue_sema)
|
|
||||||
}
|
|
||||||
|
|
||||||
for t in pool.threads {
|
|
||||||
thread.destroy(t)
|
|
||||||
}
|
|
||||||
delete(pool.threads)
|
|
||||||
for item in pool.queue {
|
|
||||||
delete(item.path)
|
|
||||||
if len(item.rel) > 0 {delete(item.rel)}
|
|
||||||
}
|
|
||||||
delete(pool.queue)
|
|
||||||
|
|
||||||
for ctx in pool.all_contexts {
|
|
||||||
if ctx.gi != nil {
|
|
||||||
destroy(ctx.gi)
|
|
||||||
free(ctx.gi)
|
|
||||||
}
|
|
||||||
if len(ctx.base_rel) > 0 {
|
|
||||||
delete(ctx.base_rel)
|
|
||||||
}
|
|
||||||
free(ctx)
|
|
||||||
}
|
|
||||||
delete(pool.all_contexts)
|
|
||||||
|
|
||||||
if pool.has_pattern {
|
|
||||||
regex.destroy(pool.pattern_re)
|
|
||||||
}
|
|
||||||
if pool.exclude_gi != nil {
|
|
||||||
destroy(pool.exclude_gi)
|
|
||||||
free(pool.exclude_gi)
|
|
||||||
}
|
|
||||||
|
|
||||||
free(pool)
|
|
||||||
|
|
||||||
chan.close(ch)
|
|
||||||
thread.join(collector)
|
|
||||||
thread.destroy(collector)
|
|
||||||
}
|
|
||||||
|
|
||||||
flush_buf :: proc(ch: chan.Chan([]u8), local: ^[dynamic]u8) {
|
|
||||||
if len(local) == 0 do return
|
|
||||||
batch := local[:]
|
|
||||||
local^ = make([dynamic]u8, 0, OUTPUT_BUF_SIZE)
|
|
||||||
chan.send(ch, batch)
|
|
||||||
}
|
|
||||||
|
|
||||||
append_path :: proc(buf: ^[dynamic]u8, parent, name: string, trailing_slash: bool) {
|
|
||||||
need_sep := len(parent) > 0 && parent[len(parent) - 1] != '/'
|
|
||||||
size := len(parent) + len(name) + 1
|
|
||||||
if need_sep do size += 1
|
|
||||||
if trailing_slash do size += 1
|
|
||||||
|
|
||||||
old_len := len(buf)
|
|
||||||
reserve(buf, old_len + size)
|
|
||||||
resize(buf, old_len + size)
|
|
||||||
|
|
||||||
pos := old_len
|
|
||||||
pos += copy(buf[pos:], parent)
|
|
||||||
if need_sep {buf[pos] = '/'; pos += 1}
|
|
||||||
pos += copy(buf[pos:], name)
|
|
||||||
if trailing_slash {buf[pos] = '/'; pos += 1}
|
|
||||||
buf[pos] = '\n'
|
|
||||||
}
|
|
||||||
|
|
||||||
walk_worker :: proc(t: ^thread.Thread) {
|
|
||||||
pool := cast(^WalkerPool)t.data
|
|
||||||
|
|
||||||
local_buf := make([dynamic]u8, 0, OUTPUT_BUF_SIZE)
|
|
||||||
defer {
|
|
||||||
if len(local_buf) > 0 {
|
|
||||||
flush_buf(pool.result_chan, &local_buf)
|
|
||||||
}
|
|
||||||
delete(local_buf)
|
|
||||||
}
|
|
||||||
|
|
||||||
for {
|
|
||||||
sync.atomic_sema_wait(&pool.queue_sema)
|
|
||||||
|
|
||||||
sync.mutex_lock(&pool.queue_mutex)
|
|
||||||
if len(pool.queue) == 0 {
|
|
||||||
sync.mutex_unlock(&pool.queue_mutex)
|
|
||||||
if sync.atomic_load_explicit(&pool.active, .Acquire) == 0 {
|
|
||||||
sync.one_shot_event_signal(&pool.done)
|
|
||||||
}
|
|
||||||
break
|
|
||||||
}
|
|
||||||
last := len(pool.queue) - 1
|
|
||||||
item := pool.queue[last]
|
|
||||||
ordered_remove(&pool.queue, last)
|
|
||||||
sync.mutex_unlock(&pool.queue_mutex)
|
|
||||||
|
|
||||||
process_dir(pool, item, &local_buf)
|
|
||||||
delete(item.path)
|
|
||||||
if len(item.rel) > 0 {delete(item.rel)}
|
|
||||||
|
|
||||||
if len(local_buf) >= OUTPUT_BUF_SIZE {
|
|
||||||
flush_buf(pool.result_chan, &local_buf)
|
|
||||||
}
|
|
||||||
|
|
||||||
old := sync.atomic_sub_explicit(&pool.active, 1, .Release)
|
|
||||||
if old == 1 {
|
|
||||||
sync.one_shot_event_signal(&pool.done)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
process_dir :: proc(pool: ^WalkerPool, item: WorkItem, local_buf: ^[dynamic]u8) {
|
|
||||||
dir_path := item.path
|
|
||||||
|
|
||||||
cpath := strings.clone_to_cstring(dir_path)
|
|
||||||
if cpath == nil do return
|
|
||||||
defer delete(cpath)
|
|
||||||
|
|
||||||
fd, open_err := linux.open(cpath, {.DIRECTORY, .CLOEXEC})
|
|
||||||
if open_err != .NONE do return
|
|
||||||
defer linux.close(fd)
|
|
||||||
|
|
||||||
has_git := false
|
|
||||||
if !item.in_ignored {
|
|
||||||
has_git = has_git_dir(fd)
|
|
||||||
}
|
|
||||||
|
|
||||||
gi_ctx := item.gi_ctx
|
|
||||||
rel := item.rel
|
|
||||||
|
|
||||||
if has_git {
|
|
||||||
gi_ctx = nil
|
|
||||||
rel = ""
|
|
||||||
}
|
|
||||||
|
|
||||||
child_in_repo := has_git || item.in_repo
|
|
||||||
|
|
||||||
gi: ^Gitignore = nil
|
|
||||||
if !item.in_ignored {
|
|
||||||
gi = load_ignore_patterns(dir_path, child_in_repo)
|
|
||||||
}
|
|
||||||
if gi != nil {
|
|
||||||
new_ctx := new(GIContext)
|
|
||||||
new_ctx.gi = gi
|
|
||||||
if len(rel) > 0 {
|
|
||||||
new_ctx.base_rel, _ = strings.clone(rel)
|
|
||||||
}
|
|
||||||
new_ctx.parent = gi_ctx
|
|
||||||
|
|
||||||
sync.mutex_lock(&pool.contexts_lock)
|
|
||||||
append(&pool.all_contexts, new_ctx)
|
|
||||||
sync.mutex_unlock(&pool.contexts_lock)
|
|
||||||
|
|
||||||
gi_ctx = new_ctx
|
|
||||||
}
|
|
||||||
|
|
||||||
buf: [32 * 1024]u8
|
|
||||||
rel_buf: [4096]u8
|
|
||||||
|
|
||||||
for {
|
|
||||||
n, errno := linux.getdents(fd, buf[:])
|
|
||||||
if n <= 0 || errno != .NONE do break
|
|
||||||
|
|
||||||
offs := 0
|
|
||||||
for d in linux.dirent_iterate_buf(buf[:n], &offs) {
|
|
||||||
name := linux.dirent_name(d)
|
|
||||||
if name == "." || name == ".." do continue
|
|
||||||
if name == ".git" do continue
|
|
||||||
|
|
||||||
is_dir := d.type == .DIR
|
|
||||||
is_nondir := d.type != .DIR
|
|
||||||
|
|
||||||
if pool.exclude_gi != nil && is_ignored(pool.exclude_gi, name, is_dir) {
|
|
||||||
continue
|
|
||||||
}
|
|
||||||
|
|
||||||
entry_rel := build_rel(rel_buf[:], rel, name)
|
|
||||||
|
|
||||||
ignored := false
|
|
||||||
if item.in_ignored {
|
|
||||||
ignored = true
|
|
||||||
} else if gi_ctx != nil {
|
|
||||||
ignored = check_chain(gi_ctx, entry_rel, is_dir)
|
|
||||||
}
|
|
||||||
|
|
||||||
if is_dir {
|
|
||||||
if ignored && matches_pattern(pool, name) {
|
|
||||||
append_path(local_buf, dir_path, name, true)
|
|
||||||
}
|
|
||||||
child_rel, _ := strings.clone(entry_rel)
|
|
||||||
child_path := join_path(dir_path, name)
|
|
||||||
push_work(
|
|
||||||
pool,
|
|
||||||
WorkItem {
|
|
||||||
path = child_path,
|
|
||||||
rel = child_rel,
|
|
||||||
gi_ctx = gi_ctx,
|
|
||||||
in_repo = child_in_repo,
|
|
||||||
in_ignored = ignored,
|
|
||||||
},
|
|
||||||
)
|
|
||||||
} else if is_nondir {
|
|
||||||
if ignored && matches_pattern(pool, name) {
|
|
||||||
append_path(local_buf, dir_path, name, false)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
check_chain :: proc(ctx: ^GIContext, entry_rel: string, is_dir: bool) -> bool {
|
|
||||||
c := ctx
|
|
||||||
for c != nil {
|
|
||||||
if c.gi != nil {
|
|
||||||
rel := relative_to(entry_rel, c.base_rel)
|
|
||||||
match := check_match(c.gi, rel, is_dir)
|
|
||||||
if match != .None {
|
|
||||||
return match == .Ignored
|
|
||||||
}
|
|
||||||
}
|
|
||||||
c = c.parent
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
relative_to :: proc(entry_rel, base_rel: string) -> string {
|
|
||||||
if len(base_rel) == 0 do return entry_rel
|
|
||||||
prefix_len := len(base_rel)
|
|
||||||
if len(entry_rel) > prefix_len &&
|
|
||||||
entry_rel[prefix_len] == '/' &&
|
|
||||||
strings.has_prefix(entry_rel, base_rel) {
|
|
||||||
return entry_rel[prefix_len + 1:]
|
|
||||||
}
|
|
||||||
return entry_rel
|
|
||||||
}
|
|
||||||
|
|
||||||
build_rel :: proc(buf: []u8, rel, name: string) -> string {
|
|
||||||
if len(rel) == 0 do return name
|
|
||||||
pos := copy(buf, rel)
|
|
||||||
if pos < len(buf) {
|
|
||||||
buf[pos] = '/'
|
|
||||||
pos += 1
|
|
||||||
pos += copy(buf[pos:], name)
|
|
||||||
}
|
|
||||||
return string(buf[:pos])
|
|
||||||
}
|
|
||||||
|
|
||||||
matches_pattern :: proc(pool: ^WalkerPool, name: string) -> bool {
|
|
||||||
if !pool.has_pattern do return true
|
|
||||||
cap, ok := regex.match(pool.pattern_re, name)
|
|
||||||
regex.destroy(cap)
|
|
||||||
return ok
|
|
||||||
}
|
|
||||||
|
|
||||||
push_work :: proc(pool: ^WalkerPool, item: WorkItem) {
|
|
||||||
sync.atomic_add_explicit(&pool.active, 1, .Relaxed)
|
|
||||||
sync.mutex_lock(&pool.queue_mutex)
|
|
||||||
append(&pool.queue, item)
|
|
||||||
sync.mutex_unlock(&pool.queue_mutex)
|
|
||||||
sync.atomic_sema_post(&pool.queue_sema)
|
|
||||||
}
|
|
||||||
|
|
||||||
has_git_dir :: proc(fd: linux.Fd) -> bool {
|
|
||||||
git_fd, err := linux.openat(fd, ".git", {.DIRECTORY, .CLOEXEC})
|
|
||||||
if err == .NONE {
|
|
||||||
linux.close(git_fd)
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
load_ignore_patterns :: proc(dir_path: string, in_repo: bool) -> ^Gitignore {
|
|
||||||
has_patterns := false
|
|
||||||
sb: strings.Builder
|
|
||||||
strings.builder_init(&sb)
|
|
||||||
defer strings.builder_destroy(&sb)
|
|
||||||
|
|
||||||
if in_repo {
|
|
||||||
gi_path := join_path(dir_path, ".gitignore")
|
|
||||||
data, err := os.read_entire_file_from_path(gi_path, context.allocator)
|
|
||||||
delete(gi_path)
|
|
||||||
if err == .NONE {
|
|
||||||
fmt.sbprintf(&sb, "%s", string(data))
|
|
||||||
delete(data)
|
|
||||||
has_patterns = true
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
ig_path := join_path(dir_path, ".ignore")
|
|
||||||
idata, ierr := os.read_entire_file_from_path(ig_path, context.allocator)
|
|
||||||
delete(ig_path)
|
|
||||||
if ierr == .NONE {
|
|
||||||
fmt.sbprintf(&sb, "%s", string(idata))
|
|
||||||
delete(idata)
|
|
||||||
has_patterns = true
|
|
||||||
}
|
|
||||||
|
|
||||||
if !has_patterns do return nil
|
|
||||||
|
|
||||||
content := strings.to_string(sb)
|
|
||||||
gi := new(Gitignore)
|
|
||||||
gi^ = parse(content)
|
|
||||||
return gi
|
|
||||||
}
|
|
||||||
|
|
||||||
join_path :: proc(parent, child: string) -> string {
|
|
||||||
need_sep := len(parent) == 0 || parent[len(parent) - 1] != '/'
|
|
||||||
total := len(parent) + len(child)
|
|
||||||
if need_sep do total += 1
|
|
||||||
buf := make([]u8, total, context.allocator)
|
|
||||||
pos := copy(buf, parent)
|
|
||||||
if need_sep {
|
|
||||||
buf[pos] = '/'
|
|
||||||
pos += 1
|
|
||||||
}
|
|
||||||
copy(buf[pos:], child)
|
|
||||||
return string(buf)
|
|
||||||
}
|
|
||||||
35
flake.nix
35
flake.nix
@@ -11,12 +11,11 @@
|
|||||||
};
|
};
|
||||||
|
|
||||||
outputs =
|
outputs =
|
||||||
inputs@{
|
inputs@{ flake-parts
|
||||||
flake-parts,
|
, nixpkgs
|
||||||
nixpkgs,
|
, nixpkgs-unstable
|
||||||
nixpkgs-unstable,
|
, self
|
||||||
self,
|
, treefmt-nix
|
||||||
treefmt-nix,
|
|
||||||
}:
|
}:
|
||||||
flake-parts.lib.mkFlake { inherit inputs; } {
|
flake-parts.lib.mkFlake { inherit inputs; } {
|
||||||
imports = [
|
imports = [
|
||||||
@@ -30,18 +29,7 @@
|
|||||||
];
|
];
|
||||||
|
|
||||||
perSystem =
|
perSystem =
|
||||||
{
|
{ pkgs, system, inputs', ... }: {
|
||||||
pkgs,
|
|
||||||
system,
|
|
||||||
inputs',
|
|
||||||
...
|
|
||||||
}:
|
|
||||||
let
|
|
||||||
mysqlite = pkgs.sqlite.overrideAttrs (old: {
|
|
||||||
configureFlags = (old.configureFlags or [ ]) ++ [ "--enable-deserialize" ];
|
|
||||||
});
|
|
||||||
in
|
|
||||||
{
|
|
||||||
_module.args.pkgs = import nixpkgs {
|
_module.args.pkgs = import nixpkgs {
|
||||||
inherit system;
|
inherit system;
|
||||||
config.allowUnfree = true;
|
config.allowUnfree = true;
|
||||||
@@ -66,7 +54,7 @@
|
|||||||
|
|
||||||
packages.default = pkgs.stdenv.mkDerivation rec {
|
packages.default = pkgs.stdenv.mkDerivation rec {
|
||||||
pname = "envr";
|
pname = "envr";
|
||||||
version = "0.3.0";
|
version = "0.2.0";
|
||||||
src = ./.;
|
src = ./.;
|
||||||
|
|
||||||
nativeBuildInputs = [
|
nativeBuildInputs = [
|
||||||
@@ -76,7 +64,7 @@
|
|||||||
|
|
||||||
buildInputs = [
|
buildInputs = [
|
||||||
pkgs.libsodium
|
pkgs.libsodium
|
||||||
mysqlite
|
pkgs.sqlite
|
||||||
];
|
];
|
||||||
|
|
||||||
buildPhase = ''
|
buildPhase = ''
|
||||||
@@ -95,20 +83,17 @@
|
|||||||
|
|
||||||
devShells.default = pkgs.mkShell {
|
devShells.default = pkgs.mkShell {
|
||||||
buildInputs = with pkgs; [
|
buildInputs = with pkgs; [
|
||||||
|
fd
|
||||||
nushell
|
nushell
|
||||||
|
|
||||||
libsodium
|
libsodium
|
||||||
mysqlite
|
sqlite
|
||||||
unstable.odin
|
unstable.odin
|
||||||
unstable.ols
|
unstable.ols
|
||||||
|
|
||||||
# Build tools
|
# Build tools
|
||||||
zip
|
zip
|
||||||
|
|
||||||
# Helper tools
|
|
||||||
delta
|
|
||||||
hyperfine
|
|
||||||
|
|
||||||
# IDE
|
# IDE
|
||||||
unstable.helix
|
unstable.helix
|
||||||
typescript-language-server
|
typescript-language-server
|
||||||
|
|||||||
@@ -5,8 +5,6 @@ import "core:fmt"
|
|||||||
import "core:os"
|
import "core:os"
|
||||||
|
|
||||||
main :: proc() {
|
main :: proc() {
|
||||||
defer free_all(context.temp_allocator)
|
|
||||||
|
|
||||||
cmd, ok := parse_args(os.args, os.to_writer(os.stdout), os.to_writer(os.stderr))
|
cmd, ok := parse_args(os.args, os.to_writer(os.stdout), os.to_writer(os.stderr))
|
||||||
defer bufio.writer_flush(cmd.out_buf)
|
defer bufio.writer_flush(cmd.out_buf)
|
||||||
if !ok {
|
if !ok {
|
||||||
|
|||||||
192
prompt.odin
192
prompt.odin
@@ -3,9 +3,36 @@ package main
|
|||||||
import "core:fmt"
|
import "core:fmt"
|
||||||
import "core:sys/posix"
|
import "core:sys/posix"
|
||||||
|
|
||||||
MultiSelect_Result :: enum {
|
Raw_State :: struct {
|
||||||
Confirm,
|
original: posix.termios,
|
||||||
Cancel,
|
fd: posix.FD,
|
||||||
|
}
|
||||||
|
|
||||||
|
enable_raw_mode :: proc(fd: posix.FD) -> (Raw_State, bool) {
|
||||||
|
state: Raw_State
|
||||||
|
state.fd = fd
|
||||||
|
|
||||||
|
if posix.tcgetattr(fd, &state.original) != .OK {
|
||||||
|
return state, false
|
||||||
|
}
|
||||||
|
|
||||||
|
attr: posix.termios = state.original
|
||||||
|
attr.c_lflag -= {.ICANON, .ECHO, .ISIG, .IEXTEN}
|
||||||
|
attr.c_iflag -= {.IXON, .ICRNL, .BRKINT, .INPCK, .ISTRIP}
|
||||||
|
attr.c_oflag -= {.OPOST}
|
||||||
|
attr.c_cflag += {.CS8}
|
||||||
|
attr.c_cc[.VMIN] = 1
|
||||||
|
attr.c_cc[.VTIME] = 0
|
||||||
|
|
||||||
|
if posix.tcsetattr(fd, .TCSAFLUSH, &attr) != .OK {
|
||||||
|
return state, false
|
||||||
|
}
|
||||||
|
|
||||||
|
return state, true
|
||||||
|
}
|
||||||
|
|
||||||
|
disable_raw_mode :: proc(state: ^Raw_State) {
|
||||||
|
posix.tcsetattr(state.fd, .TCSAFLUSH, &state.original)
|
||||||
}
|
}
|
||||||
|
|
||||||
Key :: enum {
|
Key :: enum {
|
||||||
@@ -17,9 +44,71 @@ Key :: enum {
|
|||||||
Unknown,
|
Unknown,
|
||||||
}
|
}
|
||||||
|
|
||||||
Raw_State :: struct {
|
read_key :: proc() -> Key {
|
||||||
original: posix.termios,
|
buf: [3]u8
|
||||||
fd: posix.FD,
|
|
||||||
|
n := posix.read(posix.STDIN_FILENO, &buf[0], 1)
|
||||||
|
if n <= 0 {
|
||||||
|
return .Unknown
|
||||||
|
}
|
||||||
|
|
||||||
|
switch buf[0] {
|
||||||
|
case ' ':
|
||||||
|
return .Space
|
||||||
|
case '\n', '\r':
|
||||||
|
return .Enter
|
||||||
|
case 0x03:
|
||||||
|
return .Escape
|
||||||
|
case 0x1b:
|
||||||
|
tv: posix.timeval
|
||||||
|
tv.tv_sec = 0
|
||||||
|
tv.tv_usec = posix.suseconds_t(100000)
|
||||||
|
|
||||||
|
set: posix.fd_set
|
||||||
|
posix.FD_ZERO(&set)
|
||||||
|
posix.FD_SET(posix.STDIN_FILENO, &set)
|
||||||
|
|
||||||
|
ready := posix.select(1, &set, nil, nil, &tv)
|
||||||
|
if ready <= 0 {
|
||||||
|
return .Escape
|
||||||
|
}
|
||||||
|
|
||||||
|
n2 := posix.read(posix.STDIN_FILENO, &buf[1], 1)
|
||||||
|
if n2 <= 0 || buf[1] != '[' {
|
||||||
|
return .Escape
|
||||||
|
}
|
||||||
|
|
||||||
|
posix.FD_ZERO(&set)
|
||||||
|
posix.FD_SET(posix.STDIN_FILENO, &set)
|
||||||
|
tv.tv_sec = 0
|
||||||
|
tv.tv_usec = posix.suseconds_t(100000)
|
||||||
|
|
||||||
|
ready = posix.select(1, &set, nil, nil, &tv)
|
||||||
|
if ready <= 0 {
|
||||||
|
return .Escape
|
||||||
|
}
|
||||||
|
|
||||||
|
n3 := posix.read(posix.STDIN_FILENO, &buf[2], 1)
|
||||||
|
if n3 <= 0 {
|
||||||
|
return .Escape
|
||||||
|
}
|
||||||
|
|
||||||
|
switch buf[2] {
|
||||||
|
case 'A':
|
||||||
|
return .Up
|
||||||
|
case 'B':
|
||||||
|
return .Down
|
||||||
|
case:
|
||||||
|
return .Escape
|
||||||
|
}
|
||||||
|
case:
|
||||||
|
return .Unknown
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
MultiSelect_Result :: enum {
|
||||||
|
Confirm,
|
||||||
|
Cancel,
|
||||||
}
|
}
|
||||||
|
|
||||||
MAX_VISIBLE :: 7
|
MAX_VISIBLE :: 7
|
||||||
@@ -36,7 +125,7 @@ multi_select :: proc(
|
|||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
selected = make([dynamic]bool, 0, len(options))
|
selected = make([dynamic]bool, len(options))
|
||||||
cursor: int = 0
|
cursor: int = 0
|
||||||
scroll_offset: int = 0
|
scroll_offset: int = 0
|
||||||
|
|
||||||
@@ -110,92 +199,3 @@ render_options :: proc(
|
|||||||
return end - scroll_offset
|
return end - scroll_offset
|
||||||
}
|
}
|
||||||
|
|
||||||
enable_raw_mode :: proc(fd: posix.FD) -> (Raw_State, bool) {
|
|
||||||
state: Raw_State
|
|
||||||
state.fd = fd
|
|
||||||
|
|
||||||
if posix.tcgetattr(fd, &state.original) != .OK {
|
|
||||||
return state, false
|
|
||||||
}
|
|
||||||
|
|
||||||
attr: posix.termios = state.original
|
|
||||||
attr.c_lflag -= {.ICANON, .ECHO, .ISIG, .IEXTEN}
|
|
||||||
attr.c_iflag -= {.IXON, .ICRNL, .BRKINT, .INPCK, .ISTRIP}
|
|
||||||
attr.c_oflag -= {.OPOST}
|
|
||||||
attr.c_cflag += {.CS8}
|
|
||||||
attr.c_cc[.VMIN] = 1
|
|
||||||
attr.c_cc[.VTIME] = 0
|
|
||||||
|
|
||||||
if posix.tcsetattr(fd, .TCSAFLUSH, &attr) != .OK {
|
|
||||||
return state, false
|
|
||||||
}
|
|
||||||
|
|
||||||
return state, true
|
|
||||||
}
|
|
||||||
|
|
||||||
disable_raw_mode :: proc(state: ^Raw_State) {
|
|
||||||
posix.tcsetattr(state.fd, .TCSAFLUSH, &state.original)
|
|
||||||
}
|
|
||||||
|
|
||||||
read_key :: proc() -> Key {
|
|
||||||
buf: [3]u8
|
|
||||||
|
|
||||||
n := posix.read(posix.STDIN_FILENO, &buf[0], 1)
|
|
||||||
if n <= 0 {
|
|
||||||
return .Unknown
|
|
||||||
}
|
|
||||||
|
|
||||||
switch buf[0] {
|
|
||||||
case ' ':
|
|
||||||
return .Space
|
|
||||||
case '\n', '\r':
|
|
||||||
return .Enter
|
|
||||||
case 0x03:
|
|
||||||
return .Escape
|
|
||||||
case 0x1b:
|
|
||||||
tv: posix.timeval
|
|
||||||
tv.tv_sec = 0
|
|
||||||
tv.tv_usec = posix.suseconds_t(100000)
|
|
||||||
|
|
||||||
set: posix.fd_set
|
|
||||||
posix.FD_ZERO(&set)
|
|
||||||
posix.FD_SET(posix.STDIN_FILENO, &set)
|
|
||||||
|
|
||||||
ready := posix.select(1, &set, nil, nil, &tv)
|
|
||||||
if ready <= 0 {
|
|
||||||
return .Escape
|
|
||||||
}
|
|
||||||
|
|
||||||
n2 := posix.read(posix.STDIN_FILENO, &buf[1], 1)
|
|
||||||
if n2 <= 0 || buf[1] != '[' {
|
|
||||||
return .Escape
|
|
||||||
}
|
|
||||||
|
|
||||||
posix.FD_ZERO(&set)
|
|
||||||
posix.FD_SET(posix.STDIN_FILENO, &set)
|
|
||||||
tv.tv_sec = 0
|
|
||||||
tv.tv_usec = posix.suseconds_t(100000)
|
|
||||||
|
|
||||||
ready = posix.select(1, &set, nil, nil, &tv)
|
|
||||||
if ready <= 0 {
|
|
||||||
return .Escape
|
|
||||||
}
|
|
||||||
|
|
||||||
n3 := posix.read(posix.STDIN_FILENO, &buf[2], 1)
|
|
||||||
if n3 <= 0 {
|
|
||||||
return .Escape
|
|
||||||
}
|
|
||||||
|
|
||||||
switch buf[2] {
|
|
||||||
case 'A':
|
|
||||||
return .Up
|
|
||||||
case 'B':
|
|
||||||
return .Down
|
|
||||||
case:
|
|
||||||
return .Escape
|
|
||||||
}
|
|
||||||
case:
|
|
||||||
return .Unknown
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
|
|||||||
127
scan.odin
127
scan.odin
@@ -1,21 +1,137 @@
|
|||||||
package main
|
package main
|
||||||
|
|
||||||
|
import "core:fmt"
|
||||||
import "core:os"
|
import "core:os"
|
||||||
|
import "core:strings"
|
||||||
|
import "core:sync"
|
||||||
|
import "core:terminal"
|
||||||
|
|
||||||
import "findr"
|
fd_counter: sync.Atomic_Mutex
|
||||||
|
fd_seq: int
|
||||||
|
|
||||||
// Caller is responsible for freeing paths
|
// Caller is responsible for freeing paths
|
||||||
scan_path :: proc(search_path: string, cfg: Config) -> (paths: [dynamic]string, ok: bool) {
|
scan_path :: proc(search_path: string, cfg: Config) -> (paths: [dynamic]string, ok: bool) {
|
||||||
opts := findr.WalkOptions {
|
if terminal.is_terminal(os.stdout) {
|
||||||
pattern = cfg.ScanConfig.Matcher,
|
fmt.printf("Searching for all files in \"%s\"...\n", search_path)
|
||||||
excludes = cfg.ScanConfig.Exclude[:],
|
|
||||||
}
|
}
|
||||||
findr.walk({search_path}, &paths, opts, os.get_processor_core_count())
|
all_files, all_ok := run_fd(build_fd_args(search_path, cfg, true))
|
||||||
|
if !all_ok {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
if terminal.is_terminal(os.stdout) {
|
||||||
|
fmt.printf("Search for unignored fies in \"%s\"...\n", search_path)
|
||||||
|
}
|
||||||
|
unignored_files, unignored_ok := run_fd(build_fd_args(search_path, cfg, false))
|
||||||
|
if !unignored_ok {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
unignored_set := make(map[string]bool, len(unignored_files), context.temp_allocator)
|
||||||
|
for file in unignored_files {
|
||||||
|
unignored_set[file] = true
|
||||||
|
}
|
||||||
|
|
||||||
|
for file in all_files {
|
||||||
|
if !(file in unignored_set) {
|
||||||
|
append(&paths, file)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
ok = true
|
ok = true
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
|
@(private = "file")
|
||||||
|
build_fd_args :: proc(search_path: string, cfg: Config, include_ignored: bool) -> []string {
|
||||||
|
args_len := 3 + 2 * len(cfg.ScanConfig.Exclude) + 2
|
||||||
|
args := make([dynamic]string, 0, args_len, context.temp_allocator)
|
||||||
|
append(&args, "fd")
|
||||||
|
append(&args, "-a")
|
||||||
|
append(&args, cfg.ScanConfig.Matcher)
|
||||||
|
|
||||||
|
for exclude in cfg.ScanConfig.Exclude {
|
||||||
|
append(&args, "-E")
|
||||||
|
append(&args, exclude)
|
||||||
|
}
|
||||||
|
|
||||||
|
if include_ignored {
|
||||||
|
append(&args, "-HI")
|
||||||
|
} else {
|
||||||
|
append(&args, "-H")
|
||||||
|
}
|
||||||
|
|
||||||
|
append(&args, search_path)
|
||||||
|
return args[:]
|
||||||
|
}
|
||||||
|
|
||||||
|
run_fd :: proc(args: []string) -> (lines: []string, ok: bool) {
|
||||||
|
tmp_path := next_fd_tmp_path()
|
||||||
|
tmp_file, tmp_err := os.open(tmp_path, os.O_CREATE | os.O_WRONLY | os.O_TRUNC)
|
||||||
|
if tmp_err != nil {
|
||||||
|
// TODO: Log a message here
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
desc := os.Process_Desc {
|
||||||
|
command = args,
|
||||||
|
stdout = tmp_file,
|
||||||
|
stderr = nil,
|
||||||
|
}
|
||||||
|
|
||||||
|
p, start_err := os.process_start(desc)
|
||||||
|
os.close(tmp_file)
|
||||||
|
if start_err != nil {
|
||||||
|
os.remove(tmp_path)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
state, wait_err := os.process_wait(p)
|
||||||
|
if wait_err != nil || state.exit_code != 0 {
|
||||||
|
os.remove(tmp_path)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
data, read_err := os.read_entire_file_from_path(tmp_path, context.temp_allocator)
|
||||||
|
os.remove(tmp_path)
|
||||||
|
if read_err != nil {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
output := string(data)
|
||||||
|
output = strings.trim_space(output)
|
||||||
|
if len(output) == 0 {
|
||||||
|
ok = true
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
raw_lines := strings.split(output, "\n", context.temp_allocator)
|
||||||
|
result := make([dynamic]string, 0, len(raw_lines), context.temp_allocator)
|
||||||
|
for line in raw_lines {
|
||||||
|
trimmed := strings.trim_space(line)
|
||||||
|
if len(trimmed) > 0 {
|
||||||
|
append(&result, trimmed)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
return result[:], true
|
||||||
|
}
|
||||||
|
|
||||||
|
@(private = "file")
|
||||||
|
next_fd_tmp_path :: proc() -> string {
|
||||||
|
sync.atomic_mutex_lock(&fd_counter)
|
||||||
|
n := fd_seq
|
||||||
|
fd_seq += 1
|
||||||
|
sync.atomic_mutex_unlock(&fd_counter)
|
||||||
|
return fmt.tprintf("/tmp/envr-fd-%d-%d", os.get_pid(), n)
|
||||||
|
}
|
||||||
|
|
||||||
|
cant_scan :: proc(feats: AvailableFeatures) -> bool {
|
||||||
|
return Feature.Fd not_in feats
|
||||||
|
}
|
||||||
|
|
||||||
find_unbacked :: proc(local_files: []string, db_files: []EnvFile) -> []string {
|
find_unbacked :: proc(local_files: []string, db_files: []EnvFile) -> []string {
|
||||||
|
// Lives until the end of the function
|
||||||
backed_set := make(map[string]bool, len(db_files), context.temp_allocator)
|
backed_set := make(map[string]bool, len(db_files), context.temp_allocator)
|
||||||
for file in db_files {
|
for file in db_files {
|
||||||
backed_set[file.Path] = true
|
backed_set[file.Path] = true
|
||||||
@@ -29,3 +145,4 @@ find_unbacked :: proc(local_files: []string, db_files: []EnvFile) -> []string {
|
|||||||
}
|
}
|
||||||
return unbacked[:]
|
return unbacked[:]
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|||||||
@@ -3,10 +3,14 @@ package main
|
|||||||
import "core:fmt"
|
import "core:fmt"
|
||||||
import "core:os"
|
import "core:os"
|
||||||
import "core:path/filepath"
|
import "core:path/filepath"
|
||||||
|
import "core:strings"
|
||||||
import "core:testing"
|
import "core:testing"
|
||||||
|
|
||||||
@(test)
|
@(test)
|
||||||
test_scan_path_finds_gitignored_env_files :: proc(t: ^testing.T) {
|
test_scan_path_finds_gitignored_env_files :: proc(t: ^testing.T) {
|
||||||
|
feats := check_features()
|
||||||
|
testing.expect(t, cant_scan(feats) == false)
|
||||||
|
|
||||||
base := fmt.tprintf("/tmp/envr-scan-test-%d", os.get_pid())
|
base := fmt.tprintf("/tmp/envr-scan-test-%d", os.get_pid())
|
||||||
os.mkdir_all(base)
|
os.mkdir_all(base)
|
||||||
defer os.remove_all(base)
|
defer os.remove_all(base)
|
||||||
@@ -38,12 +42,7 @@ test_scan_path_finds_gitignored_env_files :: proc(t: ^testing.T) {
|
|||||||
}
|
}
|
||||||
|
|
||||||
results, ok := scan_path(base, cfg)
|
results, ok := scan_path(base, cfg)
|
||||||
defer {
|
defer delete(results)
|
||||||
for path in results {
|
|
||||||
delete(path)
|
|
||||||
}
|
|
||||||
delete(results)
|
|
||||||
}
|
|
||||||
testing.expect(t, ok, "scan_path should succeed")
|
testing.expect(t, ok, "scan_path should succeed")
|
||||||
|
|
||||||
found_env := false
|
found_env := false
|
||||||
@@ -70,6 +69,9 @@ test_scan_path_finds_gitignored_env_files :: proc(t: ^testing.T) {
|
|||||||
|
|
||||||
@(test)
|
@(test)
|
||||||
test_scan_path_empty_dir :: proc(t: ^testing.T) {
|
test_scan_path_empty_dir :: proc(t: ^testing.T) {
|
||||||
|
feats := check_features()
|
||||||
|
testing.expect(t, cant_scan(feats) == false)
|
||||||
|
|
||||||
base := fmt.tprintf("/tmp/envr-scan-empty-%d", os.get_pid())
|
base := fmt.tprintf("/tmp/envr-scan-empty-%d", os.get_pid())
|
||||||
os.mkdir_all(base)
|
os.mkdir_all(base)
|
||||||
defer os.remove_all(base)
|
defer os.remove_all(base)
|
||||||
@@ -83,3 +85,12 @@ test_scan_path_empty_dir :: proc(t: ^testing.T) {
|
|||||||
testing.expect(t, ok, "scan_path should succeed")
|
testing.expect(t, ok, "scan_path should succeed")
|
||||||
testing.expect(t, len(results) == 0, fmt.tprintf("expected 0 results, got %d", len(results)))
|
testing.expect(t, len(results) == 0, fmt.tprintf("expected 0 results, got %d", len(results)))
|
||||||
}
|
}
|
||||||
|
|
||||||
|
@(test)
|
||||||
|
test_scan_meets_expectations :: proc(t: ^testing.T) {
|
||||||
|
testing.expect(t, cant_scan({}), "no features should mean can't scan")
|
||||||
|
testing.expect(t, cant_scan({.Git}), "Git alone should mean can't scan")
|
||||||
|
testing.expect(t, !cant_scan({.Fd}), "having Fd should mean can scan")
|
||||||
|
testing.expect(t, !cant_scan({.Fd, .Git}), "both Fd and Git should mean can scan")
|
||||||
|
}
|
||||||
|
|
||||||
|
|||||||
@@ -8,9 +8,6 @@ OK :: 0
|
|||||||
ROW :: 100
|
ROW :: 100
|
||||||
DONE :: 101
|
DONE :: 101
|
||||||
|
|
||||||
DESERIALIZE_FREEONCLOSE :: 1
|
|
||||||
DESERIALIZE_RESIZEABLE :: 2
|
|
||||||
|
|
||||||
foreign lib {
|
foreign lib {
|
||||||
@(link_name="sqlite3_open")
|
@(link_name="sqlite3_open")
|
||||||
db_open :: proc(filename: cstring, ppDb: ^^rawptr) -> c.int ---
|
db_open :: proc(filename: cstring, ppDb: ^^rawptr) -> c.int ---
|
||||||
@@ -34,12 +31,4 @@ foreign lib {
|
|||||||
bind_text :: proc(stmt: ^rawptr, idx: c.int, val: cstring, n: c.int, destructor: rawptr) -> c.int ---
|
bind_text :: proc(stmt: ^rawptr, idx: c.int, val: cstring, n: c.int, destructor: rawptr) -> c.int ---
|
||||||
@(link_name="sqlite3_changes")
|
@(link_name="sqlite3_changes")
|
||||||
changes :: proc(db: ^rawptr) -> c.int ---
|
changes :: proc(db: ^rawptr) -> c.int ---
|
||||||
@(link_name="sqlite3_serialize")
|
|
||||||
serialize :: proc(db: ^rawptr, zSchema: cstring, piSize: ^i64, mFlags: u32) -> [^]u8 ---
|
|
||||||
@(link_name="sqlite3_deserialize")
|
|
||||||
deserialize :: proc(db: ^rawptr, zSchema: cstring, pData: [^]u8, szDb: i64, szBuf: i64, mFlags: u32) -> c.int ---
|
|
||||||
@(link_name="sqlite3_malloc64")
|
|
||||||
malloc64 :: proc(n: i64) -> [^]u8 ---
|
|
||||||
@(link_name="sqlite3_free")
|
|
||||||
free :: proc(p: rawptr) ---
|
|
||||||
}
|
}
|
||||||
|
|||||||
@@ -1 +1 @@
|
|||||||
0.3.0
|
0.2.0
|
||||||
|
|||||||
Reference in New Issue
Block a user