Evaluation program: evaluation.py

https://github.com/ii-research/NTCIR-19-FEHU-resource/tree/main 

Test the evaluator program using the sample data in dataset.

Task-1a:

• Macro F1 score

• Micro F1 score

Task-1b:

• Macro F1 score

• Micro F1 score

• Direction Reverse Rate

Task-2a:

• Macro F1 score

• Micro F1 score

Task-2b:

• Macro F1 score

• Micro F1 score

• Direction Reverse Rate