-
Notifications
You must be signed in to change notification settings - Fork 80
/
makefile
53 lines (41 loc) · 2.06 KB
/
makefile
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
all: lint test
.PHONY: test test-base lint format spellcheck upload clean
test-base:
python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
env LANGUAGEMODELS_MODEL_LICENSE="apache|mit|bsd" python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/__init__.py
LANGUAGEMODELS_INSTRUCT_MODEL="LaMini-GPT-124M" python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/inference.py
test: test-base
env LANGUAGEMODELS_MAX_RAM=large python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
env LANGUAGEMODELS_MAX_RAM=xl python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
test-perf:
PYTHONPATH=. python3 test/perf.py
test-commercial:
env LANGUAGEMODELS_SIZE=small LANGUAGEMODELS_MODEL_LICENSE="apache|mit|bsd" python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
env LANGUAGEMODELS_MODEL_LICENSE="apache|mit|bsd" python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
env LANGUAGEMODELS_SIZE=large LANGUAGEMODELS_MODEL_LICENSE="apache|mit|bsd" python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
env LANGUAGEMODELS_SIZE=xl LANGUAGEMODELS_MODEL_LICENSE="apache|mit|bsd" python3 -m doctest -o ELLIPSIS -o NORMALIZE_WHITESPACE languagemodels/*.py
lint:
flake8 --max-line-length 88 --extend-ignore E203,F401 languagemodels/__init__.py
flake8 --max-line-length 88 --extend-ignore E203 languagemodels/models.py languagemodels/inference.py languagemodels/embeddings.py languagemodels/config.py examples/*.py
format:
black languagemodels/*.py examples/*.py test/*.py
doc:
mkdir -p doc
python3 -m pdoc -o doc languagemodels
paper.pdf: paper.md paper.bib
pandoc $< --citeproc --pdf-engine=xelatex -o $@
spellcheck:
aspell -c --dont-backup readme.md
aspell -c --dont-backup paper.md
upload:
python3 setup.py sdist bdist_wheel
python3 -m twine upload dist/*
clean:
rm -rf tmp
rm -rf languagemodels.egg-info
rm -rf languagemodels/__pycache__
rm -rf dist
rm -rf build
rm -rf doc
rm -rf .ipynb_checkpoints
rm -rf examples/.ipynb_checkpoints