search

kaistshadow / blockchain-sim

Scalable blockchain simulator/emulator running on shadow simulator
MIT License
9 stars 1 forks source link

Configuration management - Test #137

Closed tkdlqm2 closed 3 years ago

tkdlqm2 commented 3 years ago

Descirption: BLEEP test 형상관리 issue branch

Goal:

How to reproduce :

  1. git checkout feature/137/dev_test_tool
  2. python setup.py --bitcoin && python setup.py --test
tkdlqm2 commented 3 years ago

Feedback : 사용자 단에서 오버헤드를 줄이기 위한 디자인

Before : test.py 에 filter log list를 하드코딩 식으로 디자인 After : test.py에서 컨트롤 하지 않고, txt 파일로 컨트롤 할 수 있게함. 즉 filter log list가 담긴 파일을 읽어와 로직을 수행하는 것.

가정) litecoin에 대해 실행 결과 파일이 제대로 동작하였나 테스팅 하고 싶은 상황.

regtest/shadow-litecoin/ 경로에 다음 파일을 저장 시킴.

tkdlqm2 commented 3 years ago

image 위에 그림 처럼 txt 파일로 standard log data를 추가하여, 소스코드를 하드코딩하는 방식이 아닌, 하드코딩할 데이터를 파일로 만들어 파일을 읽는 식으로 하여 진행하도록 디자인함.

tkdlqm2 commented 3 years ago

unit test 에 대해 test case와 example 만들기.

tkdlqm2 commented 3 years ago

TDD 방법론을 활용한 unit test case 만들기.

ygnkim commented 3 years ago

필요없는 regression test들을 일단 정리하고자 한다. #125 와도 관련이 있다.

release 0.1.0에 포함시킬 feature(P2P library module, sybil attack test, bitcoin)에 관련된 test말고는 우선 정리하도록 한다.

삭제해야할 regtest list

체크 필요한 regtest list

체크 필요한 regtest들은 현재 제대로 동작하는지를 체크하고, 만일 제대로 동작하고 release 0.1.0에 포함될만한 테스트라면 간략하게 어떤 부분을 테스트하며 테스트 입력값, 결과값이 무엇인지에 대한 주석을 달도록 한다.

ygnkim commented 3 years ago

release 0.1.0 feature에 대한 test case 구현이 필요하다.

우선 release 0.1.0에서는 하나의 블록체인 노드를 에뮬레이션시키는 것을 지원하고, 해당 노드에 대한 1) dummy transaction 주입 기능 2) 노드가 블록체인화 시킬 수 있는 transaction 수에 대한 maximum throughput 측정 기능 3) 노드에 대한 가상의 sybil 네트워크의 구축 및 eclipse 공격 수행 기능 을 제공하는 것을 목표로 한다.

위의 1,2번 기능을 위해서는 transaction을 생성하기 위한 initial coin의 생성이 전제되어야 한다.

따라서 initial coin 생성 루틴을 수행하고, 결과적으로 initial coin이 제대로 생성되었는지 판단해주는 test case를 구현하고자 한다.

향후 여러가지 블록체인을 지원할 수 있는 형태로 initial coin 생성 루틴을 디자인하고 테스트하는 것이 바람직하겠지만, 우선 release 0.1.0에서 지원할 예정인 블록체인은 bitcoin 0.19.1 버젼뿐이므로, bitcoin 0.19.1이 동작한다고 가정하도록 한다.

ygnkim commented 3 years ago

우선 위의 두 이슈 (#196, #197)까지 작업후 develop에 병합시키면 될 듯 합니다. (병합 후에도 이 이슈 브랜치를 지울 필요는 없음)

tkdlqm2 commented 3 years ago

release 0.1.0 feature에 대한 test case 중 bitcoin 채굴 난이도 조정에 대한 구현이 필요함.

https://www.dropbox.com/home/IITP_BLEEP_%EA%B3%BC%EC%A0%9C/%ED%85%8C%EC%8A%A4%ED%8A%B8%20%EB%AA%85%EC%84%B8%EC%84%9C/release0.1.0?preview=%5B%ED%85%8C%EC%8A%A4%ED%8A%B8+%EB%AA%85%EC%84%B8%EC%84%9C+-1%5D+bitcoin+%EB%82%9C%EC%9D%B4%EB%8F%84+%EC%A1%B0%EC%A0%95.hwp

tkdlqm2 commented 3 years ago

release 0.1.0 feature에 대한 test case 중 bitcoin Initial coin에 대한 구현이 필요함.

https://www.dropbox.com/home/IITP_BLEEP_%EA%B3%BC%EC%A0%9C/%ED%85%8C%EC%8A%A4%ED%8A%B8%20%EB%AA%85%EC%84%B8%EC%84%9C/release0.1.0?preview=%5B%ED%85%8C%EC%8A%A4%ED%8A%B8+%EB%AA%85%EC%84%B8%EC%84%9C+-2%5D+Initial+coin.hwp

tkdlqm2 commented 3 years ago

release 0.1.0 feature에 대한 test case 중 Transactions generator 에 대한 구현이 필요함.

https://www.dropbox.com/home/IITP_BLEEP_%EA%B3%BC%EC%A0%9C/%ED%85%8C%EC%8A%A4%ED%8A%B8%20%EB%AA%85%EC%84%B8%EC%84%9C/release0.1.0?preview=%5B%ED%85%8C%EC%8A%A4%ED%8A%B8+%EB%AA%85%EC%84%B8%EC%84%9C+-3%5D+Transaction+generator+.hwp

tkdlqm2 commented 3 years ago

release 0.1.0 feature에 대한 test case 중 bitcoin node 실행에 대한 구현이 필요함.

tkdlqm2 commented 3 years ago

test 형상관리 브렌치에 bitcoin 외에 다른 블록체인들 정리.

tkdlqm2 commented 3 years ago

release 0.1.0 features

tkdlqm2 commented 3 years ago

rel 0.1 test 형상관리를 마무리를 하였습니다.

  1. xmlGenerate test -> xml 파일을 만들 경로에, tx injector shared object가 없으면, tx_mode는 disable로만 생성할 수 있게 만듬.

  2. shadow output test -> disable 모드만 실행 가능. -> 문제 없음.

  3. blockchainApplication test -> disable 모드만 실행 가능. -> 문제없음.

  4. difficulty -> disable 모드만 실행 가능. -> 난이도는 (1/2/3) 이 있으며, 현재 1(mainnet), 3(testnet)에 대해서는 문제없이 test가 동작함. 하지만 2(mainnet - testnet의 중단 난이도)는 기능적으로 중간 난이도에 해당하지는 않음.

  5. walletAddress -> disable 모드만 실행 가능. -> 문제 없음.

  6. mining -> disable 모드만 실행 가능. -> 문제 없음.

  7. mainchain test -> disable 모드만 실행 가능. -> 문제없음.

  8. transaction test -> enable 모드만 실행 가능. -> 문제없음. 다만 10번 test의 initial block 100개가 셋팅되기 위한 시간인 50초임으로 50초 미만으로 시뮬레이션 시간을 설정하면 에러 발생함. (에러내용 : 트랜잭션 생성 실패.)

  9. transaction count -> enable 모드만 실행 가능. -> 문제없음. 다만 10번 test의 initial block 100개가 셋팅되기 위한 시간인 50초임으로 50초 미만으로 시뮬레이션 시간을 설정하면 에러 발생함. (에러내용 : 트랜잭션 생성 실패.)

  10. initial coin -> disable 모드만 실행 가능. -> initial block 100개를 생성하는데 필요한 시뮬레이션 시간은 대략 50초 정도임.

tkdlqm2 commented 3 years ago

[How to reproduce]

git checkout issue/212

빨강 : Input data 노랑 : print result

  1. xmlGenerate test

    • cd tests/regtest/1_bitcoin/1_xmlGenerate; python3 xmlGen_test.py
    • screen image

  2. shadow test

    • cd tests/regtest/1_bitcoin/2_shadow; python3 shadowCheck_test.py
    • screen image

  3. bitcoinApplication test

    • cd tests/regtest/1_bitcoin/3_blockchainApplication; python3 bitcoinApplication.py
    • screen Input) image output) image

  4. difficulty test

    • cd tests/regtest/1_bitcoin/4_difficulty; python3 difficulty.py
    • screen Input) image output) image

  5. wallet test

    • cd tests/regtest/1_bitcoin/5_walletAddress; python3 walletAddress.py
    • screen Input) image output) image

  6. mining test

    • cd tests/regtest/1_bitcoin/6_mining; python3 mining.py
    • screen Input) image output) image

  7. mainchain test

    • cd tests/regtest/1_bitcoin/7_mainchain; python3 mainchaintest.py
    • screen Input) image output) image

  8. transaction test

    • cd tests/regtest/1_bitcoin/8_transaction; python3 transaction.py
    • screen Input) image output) image

  9. transcation count test

    • cd tests/regtest/1_bitcoin/9_transactionCheck; python3 transaction_count.py
    • screen Input) image output) image 실패원인 : 분석 중.

  10. Initial coin test

    • cd tests/regtest/1_bitcoin/10_initialCoin; python3 initialCoin.py
    • screen Input) image output) image