Compare commits
2 Commits
| Author | SHA1 | Date | |
|---|---|---|---|
| 51e059a72b | |||
| 9a59b00998 |
+5
-18
@@ -22,25 +22,12 @@ E Q U I T Y M A R K E T D A T A
|
|||||||
| cvttdata:/home/cvtt/prod/archive/md_archive/equity/alpaca_md (TBD)
|
| cvttdata:/home/cvtt/prod/archive/md_archive/equity/alpaca_md (TBD)
|
||||||
|
|
|
|
||||||
v
|
v
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
==========
|
==========
|
||||||
Storage
|
Storage
|
||||||
==========
|
==========
|
||||||
| created by crontabs:
|
| created by crontab cvttdata:
|
||||||
| cvttdata:
|
| /home/cvtt/prod/utils/sync_market_data.sh
|
||||||
|
|
|
||||||
| stored in:
|
| stored in:
|
||||||
| homestore:/works/cvtt/md_archive/crypto/cvttdata
|
| homestore:/works/cvtt/md_archive/equity/alpaca_md
|
||||||
| homestore:/works/cvtt/md_archive/crypto/cloud21
|
| cloud21:/opt/store/cvtt/md_archive/equity/alpaca_md
|
||||||
| backed up in:
|
____V_______
|
||||||
| cloud21:/opt/store/cvtt/md_archive/crypto/cvttdata
|
|
||||||
| cloud21:/opt/store/cvtt/md_archive/crypto/cloud21
|
|
||||||
v
|
|
||||||
==========
|
|
||||||
Usage
|
|
||||||
==========
|
|
||||||
|
|||||||
+1
-1
@@ -1 +1 @@
|
|||||||
0.9.1
|
0.9.3
|
||||||
|
|||||||
@@ -105,3 +105,10 @@ for ((ii=0; ii <${#Instruments[@]}; ii+=slice_size)); do
|
|||||||
|
|
||||||
parallel -j ${NumJobs} run_proc {} ${Start} ${End} ::: "${InstSlice[@]}"
|
parallel -j ${NumJobs} run_proc {} ${Start} ${End} ::: "${InstSlice[@]}"
|
||||||
done
|
done
|
||||||
|
|
||||||
|
echo "Compressing"
|
||||||
|
for file in $(find ${OutputDir} -type f -name '*db' -print )
|
||||||
|
do
|
||||||
|
echo "Compressing ${file}"
|
||||||
|
gzip ${file}
|
||||||
|
done
|
||||||
|
|||||||
Reference in New Issue
Block a user