stmhal: Generate modstm constants per build

This causes unnecessary constants to no longer be generated.
Some constants (like UART_BRR) are different between the F4 and F7

stmhal/Makefile

@@ -13,7 +13,7 @@ include ../py/mkenv.mk
 include boards/$(BOARD)/mpconfigboard.mk
 
 # qstr definitions (must come before including py.mk)
-QSTR_DEFS = qstrdefsport.h $(BUILD)/pins_qstr.h
+QSTR_DEFS = qstrdefsport.h $(BUILD)/pins_qstr.h $(BUILD)/modstm_qstr.h
 
 # include py core make definitions
 include ../py/py.mk
@@ -325,6 +325,18 @@ $(BUILD)/%_$(BOARD).c $(HEADER_BUILD)/%.h $(HEADER_BUILD)/%_af_const.h $(BUILD)/
 $(BUILD)/pins_$(BOARD).o: $(BUILD)/pins_$(BOARD).c
 	$(call compile_c)
 
+GEN_STMCONST_HDR = $(HEADER_BUILD)/modstm_const.h
+GEN_STMCONST_QSTR = $(BUILD)/modstm_qstr.h
+CMSIS_MCU_LOWER = $(shell echo $(CMSIS_MCU) | tr '[:upper:]' '[:lower:]')
+CMSIS_MCU_HDR = cmsis/devinc/$(CMSIS_MCU_LOWER).h
+
+$(BUILD)/modstm.o: $(GEN_STMCONST_HDR)
+# Use a pattern rule here so that make will only call make-stmconst.py once to
+# make both modstm_const.h and modstm_qstr.h
+$(HEADER_BUILD)/%_const.h $(BUILD)/%_qstr.h: $(CMSIS_MCU_HDR) make-stmconst.py
+	$(ECHO) "Create stmconst $@"
+	$(Q)$(PYTHON) make-stmconst.py --qstr $(GEN_STMCONST_QSTR) $(CMSIS_MCU_HDR) > $(GEN_STMCONST_HDR)
+
 $(GEN_CDCINF_HEADER): $(GEN_CDCINF_FILE) $(FILE2H)
 	$(ECHO) "Create $@"
 	$(Q)$(PYTHON) $(FILE2H) $< > $@

stmhal/boards/CERB40/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F405xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/ESPRUINO_PICO/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F401xE
 AF_FILE = boards/stm32f401_af.csv
 LD_FILE = boards/stm32f401.ld

stmhal/boards/HYDRABUS/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F405xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/NETDUINO_PLUS_2/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F405xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/PYBV10/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F405xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/PYBV3/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F405xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/PYBV4/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F405xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/STM32F4DISC/mpconfigboard.mk

 MCU_SERIES = f4
+CMSIS_MCU = STM32F407xx
 AF_FILE = boards/stm32f405_af.csv
 LD_FILE = boards/stm32f405.ld

stmhal/boards/STM32F7DISC/mpconfigboard.mk

 MCU_SERIES = f7
+CMSIS_MCU = STM32F746xx
 AF_FILE = boards/stm32f746_af.csv
 LD_FILE = boards/stm32f746.ld

stmhal/make-stmconst.py

@@ -7,6 +7,8 @@ expected to change.  After generating the file, some manual intervention is
 needed to copy the new qstr definitions to qstrdefsport.h.
 """
 
+from __future__ import print_function
+
 import argparse
 import re
 
@@ -34,7 +36,7 @@ class Lexer:
         ('typedef struct', re.compile(r'typedef struct$')),
         ('{', re.compile(r'{$')),
         ('}', re.compile(r'}$')),
-        ('} TypeDef', re.compile(r'} *(?P<id>[A-Z][A-Za-z0-9_]+)_(?P<global>(Global)?)TypeDef;$')),
+        ('} TypeDef', re.compile(r'} *(?P<id>[A-Z][A-Za-z0-9_]+)_(?P<global>([A-Za-z0-9_]+)?)TypeDef;$')),
         ('IO reg', re.compile(re_io_reg + r'; +/\*!< ' + re_comment + r', +' + re_addr_offset + r' *\*/')),
         ('IO reg array', re.compile(re_io_reg + r'\[(?P<array>[2-8])\]; +/\*!< ' + re_comment + r', +' + re_addr_offset + r'-(0x[0-9A-Z]{2,3}) *\*/')),
     )
@@ -157,6 +159,8 @@ const mp_obj_module_t stm_%s_obj = {
 def main():
     cmd_parser = argparse.ArgumentParser(description='Extract ST constants from a C header file.')
     cmd_parser.add_argument('file', nargs=1, help='input file')
+    cmd_parser.add_argument('-q', '--qstr', dest='qstr_filename', default='build/stmconst_qstr.h',
+                            help='Specified the name of the generated qstr header file')
     args = cmd_parser.parse_args()
 
     periphs, reg_defs = parse_file(args.file[0])
@@ -198,7 +202,8 @@ def main():
         'WWDG',
         'RNG',
         ):
-        print_regs(reg, reg_defs[reg], needed_qstrs)
+        if reg in reg_defs:
+            print_regs(reg, reg_defs[reg], needed_qstrs)
         #print_regs_as_submodules(reg, reg_defs[reg], modules, needed_qstrs)
 
     #print("#define MOD_STM_CONST_MODULES \\")
@@ -207,8 +212,9 @@ def main():
 
     print("")
 
-    for qstr in sorted(needed_qstrs):
-        print('Q({})'.format(qstr))
+    with open(args.qstr_filename, 'wt') as qstr_file:
+        for qstr in sorted(needed_qstrs):
+            print('Q({})'.format(qstr), file=qstr_file)
 
 if __name__ == "__main__":
     main()

stmhal/modstm.c

@@ -120,7 +120,7 @@ STATIC const mp_map_elem_t stm_module_globals_table[] = {
     { MP_OBJ_NEW_QSTR(MP_QSTR_mem16), (mp_obj_t)&stm_mem16_obj },
     { MP_OBJ_NEW_QSTR(MP_QSTR_mem32), (mp_obj_t)&stm_mem32_obj },
 
-#include "modstmconst.gen.c"
+#include "genhdr/modstm_const.h"
 };
 
 STATIC MP_DEFINE_CONST_DICT(stm_module_globals, stm_module_globals_table);

stmhal/qstrdefsport.h

@@ -474,256 +474,3 @@ Q(mem)
 Q(mem8)
 Q(mem16)
 Q(mem32)
-
-// for stm constants
-Q(ADC)
-Q(ADC1)
-Q(ADC2)
-Q(ADC3)
-Q(ADC_CR1)
-Q(ADC_CR2)
-Q(ADC_DR)
-Q(ADC_HTR)
-Q(ADC_JDR1)
-Q(ADC_JDR2)
-Q(ADC_JDR3)
-Q(ADC_JDR4)
-Q(ADC_JOFR1)
-Q(ADC_JOFR2)
-Q(ADC_JOFR3)
-Q(ADC_JOFR4)
-Q(ADC_JSQR)
-Q(ADC_LTR)
-Q(ADC_SMPR1)
-Q(ADC_SMPR2)
-Q(ADC_SQR1)
-Q(ADC_SQR2)
-Q(ADC_SQR3)
-Q(ADC_SR)
-Q(CAN1)
-Q(CAN2)
-Q(CRC)
-Q(CRC_CR)
-Q(CRC_DR)
-Q(CRC_IDR)
-Q(DAC)
-Q(DAC_CR)
-Q(DAC_DHR12L1)
-Q(DAC_DHR12L2)
-Q(DAC_DHR12LD)
-Q(DAC_DHR12R1)
-Q(DAC_DHR12R2)
-Q(DAC_DHR12RD)
-Q(DAC_DHR8R1)
-Q(DAC_DHR8R2)
-Q(DAC_DHR8RD)
-Q(DAC_DOR1)
-Q(DAC_DOR2)
-Q(DAC_SR)
-Q(DAC_SWTRIGR)
-Q(DBGMCU_APB1FZ)
-Q(DBGMCU_APB2FZ)
-Q(DBGMCU_CR)
-Q(DBGMCU_IDCODE)
-Q(DMA1)
-Q(DMA2)
-Q(DMA_HIFCR)
-Q(DMA_HISR)
-Q(DMA_LIFCR)
-Q(DMA_LISR)
-Q(EXTI)
-Q(EXTI_EMR)
-Q(EXTI_FTSR)
-Q(EXTI_IMR)
-Q(EXTI_PR)
-Q(EXTI_RTSR)
-Q(EXTI_SWIER)
-Q(FLASH)
-Q(FLASH_ACR)
-Q(FLASH_CR)
-Q(FLASH_KEYR)
-Q(FLASH_OPTCR)
-Q(FLASH_OPTCR1)
-Q(FLASH_OPTKEYR)
-Q(FLASH_SR)
-Q(GPIOA)
-Q(GPIOB)
-Q(GPIOC)
-Q(GPIOD)
-Q(GPIOE)
-Q(GPIOF)
-Q(GPIOG)
-Q(GPIOH)
-Q(GPIOI)
-Q(GPIO_AFR0)
-Q(GPIO_AFR1)
-Q(GPIO_BSRRH)
-Q(GPIO_BSRRL)
-Q(GPIO_IDR)
-Q(GPIO_LCKR)
-Q(GPIO_MODER)
-Q(GPIO_ODR)
-Q(GPIO_OSPEEDR)
-Q(GPIO_OTYPER)
-Q(GPIO_PUPDR)
-Q(I2C1)
-Q(I2C2)
-Q(I2C3)
-Q(I2C_CCR)
-Q(I2C_CR1)
-Q(I2C_CR2)
-Q(I2C_DR)
-Q(I2C_FLTR)
-Q(I2C_OAR1)
-Q(I2C_OAR2)
-Q(I2C_SR1)
-Q(I2C_SR2)
-Q(I2C_TRISE)
-Q(I2S2EXT)
-Q(I2S3EXT)
-Q(IWDG)
-Q(IWDG_KR)
-Q(IWDG_PR)
-Q(IWDG_RLR)
-Q(IWDG_SR)
-Q(PWR)
-Q(PWR_CR)
-Q(PWR_CSR)
-Q(RCC)
-Q(RCC_AHB1ENR)
-Q(RCC_AHB1LPENR)
-Q(RCC_AHB1RSTR)
-Q(RCC_AHB2ENR)
-Q(RCC_AHB2LPENR)
-Q(RCC_AHB2RSTR)
-Q(RCC_AHB3ENR)
-Q(RCC_AHB3LPENR)
-Q(RCC_AHB3RSTR)
-Q(RCC_APB1ENR)
-Q(RCC_APB1LPENR)
-Q(RCC_APB1RSTR)
-Q(RCC_APB2ENR)
-Q(RCC_APB2LPENR)
-Q(RCC_APB2RSTR)
-Q(RCC_BDCR)
-Q(RCC_CFGR)
-Q(RCC_CIR)
-Q(RCC_CR)
-Q(RCC_PLLCFGR)
-Q(RCC_PLLI2SCFGR)
-Q(RCC_SSCGR)
-Q(RNG)
-Q(RNG_CR)
-Q(RNG_DR)
-Q(RNG_SR)
-Q(RTC)
-Q(RTC_ALRMAR)
-Q(RTC_ALRMBR)
-Q(RTC_BKP0R)
-Q(RTC_BKP10R)
-Q(RTC_BKP11R)
-Q(RTC_BKP12R)
-Q(RTC_BKP13R)
-Q(RTC_BKP14R)
-Q(RTC_BKP15R)
-Q(RTC_BKP16R)
-Q(RTC_BKP17R)
-Q(RTC_BKP18R)
-Q(RTC_BKP19R)
-Q(RTC_BKP1R)
-Q(RTC_BKP2R)
-Q(RTC_BKP3R)
-Q(RTC_BKP4R)
-Q(RTC_BKP5R)
-Q(RTC_BKP6R)
-Q(RTC_BKP7R)
-Q(RTC_BKP8R)
-Q(RTC_BKP9R)
-Q(RTC_CALIBR)
-Q(RTC_CALR)
-Q(RTC_CR)
-Q(RTC_DR)
-Q(RTC_ISR)
-Q(RTC_PRER)
-Q(RTC_SHIFTR)
-Q(RTC_SSR)
-Q(RTC_TAFCR)
-Q(RTC_TR)
-Q(RTC_TSDR)
-Q(RTC_TSSSR)
-Q(RTC_TSTR)
-Q(RTC_WPR)
-Q(RTC_WUTR)
-Q(SDIO)
-Q(SPI1)
-Q(SPI2)
-Q(SPI3)
-Q(SPI_CR1)
-Q(SPI_CR2)
-Q(SPI_CRCPR)
-Q(SPI_DR)
-Q(SPI_I2SCFGR)
-Q(SPI_I2SPR)
-Q(SPI_RXCRCR)
-Q(SPI_SR)
-Q(SPI_TXCRCR)
-Q(SYSCFG)
-Q(SYSCFG_CMPCR)
-Q(SYSCFG_EXTICR0)
-Q(SYSCFG_EXTICR1)
-Q(SYSCFG_EXTICR2)
-Q(SYSCFG_EXTICR3)
-Q(SYSCFG_MEMRMP)
-Q(SYSCFG_PMC)
-Q(TIM1)
-Q(TIM10)
-Q(TIM11)
-Q(TIM12)
-Q(TIM13)
-Q(TIM14)
-Q(TIM2)
-Q(TIM3)
-Q(TIM4)
-Q(TIM5)
-Q(TIM6)
-Q(TIM7)
-Q(TIM8)
-Q(TIM9)
-Q(TIM_ARR)
-Q(TIM_BDTR)
-Q(TIM_CCER)
-Q(TIM_CCMR1)
-Q(TIM_CCMR2)
-Q(TIM_CCR1)
-Q(TIM_CCR2)
-Q(TIM_CCR3)
-Q(TIM_CCR4)
-Q(TIM_CNT)
-Q(TIM_CR1)
-Q(TIM_CR2)
-Q(TIM_DCR)
-Q(TIM_DIER)
-Q(TIM_DMAR)
-Q(TIM_EGR)
-Q(TIM_OR)
-Q(TIM_PSC)
-Q(TIM_RCR)
-Q(TIM_SMCR)
-Q(TIM_SR)
-Q(UART4)
-Q(UART5)
-Q(USART1)
-Q(USART2)
-Q(USART3)
-Q(USART6)
-Q(USART_BRR)
-Q(USART_CR1)
-Q(USART_CR2)
-Q(USART_CR3)
-Q(USART_DR)
-Q(USART_GTPR)
-Q(USART_SR)
-Q(WWDG)
-Q(WWDG_CFR)
-Q(WWDG_CR)
-Q(WWDG_SR)